mellanox SB7890 Àåºñ Áú¹®µå¸³´Ï´Ù.

   Á¶È¸ 2960   Ãßõ 1    

쪽팔리면 질문하지 맙시다. 소중한 답변 댓글을 삭제하는건 부끄러운 일 입니다 

안녕하세요. SB7890 infinibend 스위치를 사용중입니다.

해당 스위치에 서버가 6대정도 물려있는데 4대의 OS를 재설치하게 되었습니다

재설치후 2대는 정상적으로 링크가 붙었으나 2대는 다운링크인 상태로 스위치에서도 주황불로 점등되며 통신이 안되네요..

정상적인 서버 1대의 케이블과 안되는 서버의 케이블을 스왑해봤는데 결과는 동일했습니다. 문제는 정상적인 서버도 주황불이 들어오며 통신이 안되더라구요;;


스위치 문젠가 싶어 스위치 전원을 내린 후 다시 올렸더니 전체 포트LED가 주황불이 들어오면서 통신이 전부 끊겼습니다..

해결방법이 있을까요? 관리콘솔도 없는 모델인것같아서 어떻게 확인해야 할지 막막하네요..

ªÀº±Û Àϼö·Ï ½ÅÁßÇÏ°Ô.
¼­ºê³Ý ¸Å´ÏÀú°¡ ÀÖ´ø ¼­¹ö¸¦ À缳ġÇÏ°í ¼­ºê³Ý ¸Å´ÏÀú  ¼­ºñ½º¸¦ ´Ù½Ã ¿Ã¸®Áö¾ÊÀ¸½Å°Ç ¾Æ´Ñ°¡¿ä?
     
nelson1945 2023-08
¼­ºê³Ý ¸Å´ÏÀú°¡ OpensmÀ» ¸»¾¸ÇϽô°ǰ¡¿ä?
±âÁ¸OS´Â CentOS7.4, ½Å±Ô·Î ¼³Ä¡ÇÑ°Ô CentOS 7.9Àε¥ ÇØ´ç ¼­ºñ½º ¼³Ä¡ ¾øÀÌ ¿¬°áÀÌ Àß µÇ¾ú¾ú½À´Ï´Ù
Ưº°ÀÌ µû·Î ¼³Á¤ÇÑ°Ç ¾ø°í ³×Æ®¿öÅ©¸Å´ÏÀú·Î ¾ÆÀÌÇǸ¸ ³Ö¾îÁÖ¸é µ¿ÀÛÇß¾ú´Âµ¥
µÎ´ë´Â ¼³Ä¡ÇÏÀÚ¸¶ÀÚ ¾ð¸µÅ© »óÅÂ, ÇÑ´ë´Â ÄÉÀÌºí ½º¿ÒÇÏ´Ï ¾ð¸µÅ©, ³ª¸ÓÁö ¼­¹öµéÀº ½ºÀ§Ä¡ Àü¿ø ³»·È´Ù ¿Ã·È´õ´Ï ÀüºÎ ²÷°Ü¹ö·È½À´Ï´Ù ¤Ð¤Ð
          
¼­ºê³Ý ¸Å´ÏÀú´Â Àüü ¼­¹öÁß 1´ë¿¡¸¸ ¼­ºñ½º¸¦ ¿Ã¸®¸éµË´Ï´Ù
°¢ ¼­¹ö¿¡¼­ opensmd ¼­ºñ½º µ¹°íÀÖ´ÂÁö È®ÀÎÇغ¸°í ¼­ºñ½º°¡ È®ÀÎ ¾ÈµÇ¸é 1´ë¿¡ ¼­ºñ½º ¿Ã·Áº¸¼¼¿ä
OpenSMÀ» °¢ OS¿¡¼­ ¼­ºñ½º·Î ¿Ã·Áº¸½Ã°í ±×°Ô ¾Æ´Ï¸é ´Ù¸¥ ¿øÀÎÀ» ã¾Æº¸½Ã´Â°Ô ÁÁÀ»µí ÇÕ´Ï´Ù.

[Pkgs] - OpenSM ¼³Ä¡
https://kb.linbit.com/enabling-rdma-support-in-linux

[ibstat]
https://www.ibm.com/docs/ko/aix/7.2?topic=i-ibstat-command

[mstconfig]
https://docs.nvidia.com/networking/display/RHEL9/SR-IOV+Configuration

# lspci | grep Mell
87:00.0 Infiniband controller: Mellanox Technologies MT28908 Family [ConnectX-6]
87:00.1 Infiniband controller: Mellanox Technologies MT28908 Family [ConnectX-6]

# mstconfig -d 87:00.0 query

# Set port mode to infiniband
mstconfig -d 87:00.0 set LINK_TYPE_P1=1


QnA
Á¦¸ñPage 231/5691
2015-12   1551992   ¹é¸Þ°¡
2014-05   5016530   Á¤ÀºÁØ1
2023-08   2011   ¹«¹ýÀÚ
2023-08   1530   ¸¶¹ý»ç¿ÀÁî
2023-08   2213   ¿ÕÀÚµÎ
2023-08   2359   ÆĹÌÀ¯
2023-08   1868   ±¸½ÊÆò
2023-08   1810   kty9906
2023-08   2007   ¹é·æ
2023-08   2483   naan
2023-08   3990   È­¶õ
2023-08   2670   µðÁöÀ¯
2023-08   2961   nelson1945
2023-08   2680   °ËÀºÄá
2023-08   1669   ¹Ú¹®Çü
2023-08   3088   ¹ÌÄ£°¨ÀÚ
2023-08   2614   ġŲŸ¿Ã
2023-08   2550   ÀÌÇüµ¿
2023-08   2217   DeepSky
2023-08   1899   LosAngeles
2023-08   2749   ³×ÀÌÃÄ
2023-08   2652   anyi