mellanox SB7890 Àåºñ Áú¹®µå¸³´Ï´Ù.

   Á¶È¸ 2876   Ãßõ 1    

쪽팔리면 질문하지 맙시다. 소중한 답변 댓글을 삭제하는건 부끄러운 일 입니다 

안녕하세요. SB7890 infinibend 스위치를 사용중입니다.

해당 스위치에 서버가 6대정도 물려있는데 4대의 OS를 재설치하게 되었습니다

재설치후 2대는 정상적으로 링크가 붙었으나 2대는 다운링크인 상태로 스위치에서도 주황불로 점등되며 통신이 안되네요..

정상적인 서버 1대의 케이블과 안되는 서버의 케이블을 스왑해봤는데 결과는 동일했습니다. 문제는 정상적인 서버도 주황불이 들어오며 통신이 안되더라구요;;


스위치 문젠가 싶어 스위치 전원을 내린 후 다시 올렸더니 전체 포트LED가 주황불이 들어오면서 통신이 전부 끊겼습니다..

해결방법이 있을까요? 관리콘솔도 없는 모델인것같아서 어떻게 확인해야 할지 막막하네요..

ªÀº±Û Àϼö·Ï ½ÅÁßÇÏ°Ô.
¼­ºê³Ý ¸Å´ÏÀú°¡ ÀÖ´ø ¼­¹ö¸¦ À缳ġÇÏ°í ¼­ºê³Ý ¸Å´ÏÀú  ¼­ºñ½º¸¦ ´Ù½Ã ¿Ã¸®Áö¾ÊÀ¸½Å°Ç ¾Æ´Ñ°¡¿ä?
     
nelson1945 2023-08
¼­ºê³Ý ¸Å´ÏÀú°¡ OpensmÀ» ¸»¾¸ÇϽô°ǰ¡¿ä?
±âÁ¸OS´Â CentOS7.4, ½Å±Ô·Î ¼³Ä¡ÇÑ°Ô CentOS 7.9Àε¥ ÇØ´ç ¼­ºñ½º ¼³Ä¡ ¾øÀÌ ¿¬°áÀÌ Àß µÇ¾ú¾ú½À´Ï´Ù
Ưº°ÀÌ µû·Î ¼³Á¤ÇÑ°Ç ¾ø°í ³×Æ®¿öÅ©¸Å´ÏÀú·Î ¾ÆÀÌÇǸ¸ ³Ö¾îÁÖ¸é µ¿ÀÛÇß¾ú´Âµ¥
µÎ´ë´Â ¼³Ä¡ÇÏÀÚ¸¶ÀÚ ¾ð¸µÅ© »óÅÂ, ÇÑ´ë´Â ÄÉÀÌºí ½º¿ÒÇÏ´Ï ¾ð¸µÅ©, ³ª¸ÓÁö ¼­¹öµéÀº ½ºÀ§Ä¡ Àü¿ø ³»·È´Ù ¿Ã·È´õ´Ï ÀüºÎ ²÷°Ü¹ö·È½À´Ï´Ù ¤Ð¤Ð
          
¼­ºê³Ý ¸Å´ÏÀú´Â Àüü ¼­¹öÁß 1´ë¿¡¸¸ ¼­ºñ½º¸¦ ¿Ã¸®¸éµË´Ï´Ù
°¢ ¼­¹ö¿¡¼­ opensmd ¼­ºñ½º µ¹°íÀÖ´ÂÁö È®ÀÎÇغ¸°í ¼­ºñ½º°¡ È®ÀÎ ¾ÈµÇ¸é 1´ë¿¡ ¼­ºñ½º ¿Ã·Áº¸¼¼¿ä
OpenSMÀ» °¢ OS¿¡¼­ ¼­ºñ½º·Î ¿Ã·Áº¸½Ã°í ±×°Ô ¾Æ´Ï¸é ´Ù¸¥ ¿øÀÎÀ» ã¾Æº¸½Ã´Â°Ô ÁÁÀ»µí ÇÕ´Ï´Ù.

[Pkgs] - OpenSM ¼³Ä¡
https://kb.linbit.com/enabling-rdma-support-in-linux

[ibstat]
https://www.ibm.com/docs/ko/aix/7.2?topic=i-ibstat-command

[mstconfig]
https://docs.nvidia.com/networking/display/RHEL9/SR-IOV+Configuration

# lspci | grep Mell
87:00.0 Infiniband controller: Mellanox Technologies MT28908 Family [ConnectX-6]
87:00.1 Infiniband controller: Mellanox Technologies MT28908 Family [ConnectX-6]

# mstconfig -d 87:00.0 query

# Set port mode to infiniband
mstconfig -d 87:00.0 set LINK_TYPE_P1=1


QnA
Á¦¸ñPage 3764/5689
2015-12   1544309   ¹é¸Þ°¡
2014-05   5008528   Á¤ÀºÁØ1
2013-06   10200   ¿À½Ö
2023-08   1609   Á¤ÀºÁØ1
2010-05   34137   Á¤º´°ï
2018-03   3443   ¹Ú³²±Ô
2016-02   8173   sw123
2017-01   4403   Uknow
2013-06   5506   ¼Û»óº´
2006-11   4614   ÃÖ°æ¹Î
2014-11   4213   jun
2016-02   4547   ±ô¹Ú±ô¹Ú°¡
2022-01   1600   »ç½ÄÀÌ
2023-08   2877   nelson1945
2004-03   8224   Á¤ÁÖȯ
2010-06   8465   ÁÖÀç³²
2006-11   4717   ÇÏ»óÇÊ
2020-08   2635   Dishy
2004-03   7992   ÇÔ¹®¼ö
2017-01   4773   ±è°Ç¿ì
2022-01   3264   ±³±³±³
2018-04   3742   ¿ÀÆÛ·¹ÀÕ