mellanox SB7890 Àåºñ Áú¹®µå¸³´Ï´Ù.

   Á¶È¸ 2849   Ãßõ 1    

쪽팔리면 질문하지 맙시다. 소중한 답변 댓글을 삭제하는건 부끄러운 일 입니다 

안녕하세요. SB7890 infinibend 스위치를 사용중입니다.

해당 스위치에 서버가 6대정도 물려있는데 4대의 OS를 재설치하게 되었습니다

재설치후 2대는 정상적으로 링크가 붙었으나 2대는 다운링크인 상태로 스위치에서도 주황불로 점등되며 통신이 안되네요..

정상적인 서버 1대의 케이블과 안되는 서버의 케이블을 스왑해봤는데 결과는 동일했습니다. 문제는 정상적인 서버도 주황불이 들어오며 통신이 안되더라구요;;


스위치 문젠가 싶어 스위치 전원을 내린 후 다시 올렸더니 전체 포트LED가 주황불이 들어오면서 통신이 전부 끊겼습니다..

해결방법이 있을까요? 관리콘솔도 없는 모델인것같아서 어떻게 확인해야 할지 막막하네요..

ªÀº±Û Àϼö·Ï ½ÅÁßÇÏ°Ô.
¼­ºê³Ý ¸Å´ÏÀú°¡ ÀÖ´ø ¼­¹ö¸¦ À缳ġÇÏ°í ¼­ºê³Ý ¸Å´ÏÀú  ¼­ºñ½º¸¦ ´Ù½Ã ¿Ã¸®Áö¾ÊÀ¸½Å°Ç ¾Æ´Ñ°¡¿ä?
     
nelson1945 2023-08
¼­ºê³Ý ¸Å´ÏÀú°¡ OpensmÀ» ¸»¾¸ÇϽô°ǰ¡¿ä?
±âÁ¸OS´Â CentOS7.4, ½Å±Ô·Î ¼³Ä¡ÇÑ°Ô CentOS 7.9Àε¥ ÇØ´ç ¼­ºñ½º ¼³Ä¡ ¾øÀÌ ¿¬°áÀÌ Àß µÇ¾ú¾ú½À´Ï´Ù
Ưº°ÀÌ µû·Î ¼³Á¤ÇÑ°Ç ¾ø°í ³×Æ®¿öÅ©¸Å´ÏÀú·Î ¾ÆÀÌÇǸ¸ ³Ö¾îÁÖ¸é µ¿ÀÛÇß¾ú´Âµ¥
µÎ´ë´Â ¼³Ä¡ÇÏÀÚ¸¶ÀÚ ¾ð¸µÅ© »óÅÂ, ÇÑ´ë´Â ÄÉÀÌºí ½º¿ÒÇÏ´Ï ¾ð¸µÅ©, ³ª¸ÓÁö ¼­¹öµéÀº ½ºÀ§Ä¡ Àü¿ø ³»·È´Ù ¿Ã·È´õ´Ï ÀüºÎ ²÷°Ü¹ö·È½À´Ï´Ù ¤Ð¤Ð
          
¼­ºê³Ý ¸Å´ÏÀú´Â Àüü ¼­¹öÁß 1´ë¿¡¸¸ ¼­ºñ½º¸¦ ¿Ã¸®¸éµË´Ï´Ù
°¢ ¼­¹ö¿¡¼­ opensmd ¼­ºñ½º µ¹°íÀÖ´ÂÁö È®ÀÎÇغ¸°í ¼­ºñ½º°¡ È®ÀÎ ¾ÈµÇ¸é 1´ë¿¡ ¼­ºñ½º ¿Ã·Áº¸¼¼¿ä
OpenSMÀ» °¢ OS¿¡¼­ ¼­ºñ½º·Î ¿Ã·Áº¸½Ã°í ±×°Ô ¾Æ´Ï¸é ´Ù¸¥ ¿øÀÎÀ» ã¾Æº¸½Ã´Â°Ô ÁÁÀ»µí ÇÕ´Ï´Ù.

[Pkgs] - OpenSM ¼³Ä¡
https://kb.linbit.com/enabling-rdma-support-in-linux

[ibstat]
https://www.ibm.com/docs/ko/aix/7.2?topic=i-ibstat-command

[mstconfig]
https://docs.nvidia.com/networking/display/RHEL9/SR-IOV+Configuration

# lspci | grep Mell
87:00.0 Infiniband controller: Mellanox Technologies MT28908 Family [ConnectX-6]
87:00.1 Infiniband controller: Mellanox Technologies MT28908 Family [ConnectX-6]

# mstconfig -d 87:00.0 query

# Set port mode to infiniband
mstconfig -d 87:00.0 set LINK_TYPE_P1=1


QnA
Á¦¸ñPage 226/5687
2015-12   1525045   ¹é¸Þ°¡
2014-05   4989056   Á¤ÀºÁØ1
2021-11   1463   Àü¼³¼ÓÀǹ̡¦
07-08   1463   GPGPU
2022-03   1463   ½º¿þÀÎ
2023-07   1463   ¿µ»êȸ»ó
2023-07   1463   ¸¸Âð
2023-07   1464   ¸·¿ï¾ú¾î¿ä
2022-04   1464   guest1
2022-01   1464   È­Á¤Å¥»ï
2021-12   1464   ÀÓÇöÁ¦
2022-11   1464   epowergate
2023-07   1465   pumkin
02-03   1465   »ç¶ûÇ϶ó
2022-03   1465   ½ÅÀº¿Ö
2022-11   1465   ¹¹µçÆȾƿä
2022-05   1465   ÀÌÁöÆ÷Åä
01-03   1465   Á¤¹«Çö
05-13   1465   Sakura24
2022-09   1466   ÂùÀÌ
2021-11   1466   ¿À¿ùÀÇÇູ
08-23   1466   ÄܽºÅºÆ¾