mellanox SB7890 Àåºñ Áú¹®µå¸³´Ï´Ù.

   Á¶È¸ 2795   Ãßõ 1    

쪽팔리면 질문하지 맙시다. 소중한 답변 댓글을 삭제하는건 부끄러운 일 입니다 

안녕하세요. SB7890 infinibend 스위치를 사용중입니다.

해당 스위치에 서버가 6대정도 물려있는데 4대의 OS를 재설치하게 되었습니다

재설치후 2대는 정상적으로 링크가 붙었으나 2대는 다운링크인 상태로 스위치에서도 주황불로 점등되며 통신이 안되네요..

정상적인 서버 1대의 케이블과 안되는 서버의 케이블을 스왑해봤는데 결과는 동일했습니다. 문제는 정상적인 서버도 주황불이 들어오며 통신이 안되더라구요;;


스위치 문젠가 싶어 스위치 전원을 내린 후 다시 올렸더니 전체 포트LED가 주황불이 들어오면서 통신이 전부 끊겼습니다..

해결방법이 있을까요? 관리콘솔도 없는 모델인것같아서 어떻게 확인해야 할지 막막하네요..

ªÀº±Û Àϼö·Ï ½ÅÁßÇÏ°Ô.
¼­ºê³Ý ¸Å´ÏÀú°¡ ÀÖ´ø ¼­¹ö¸¦ À缳ġÇÏ°í ¼­ºê³Ý ¸Å´ÏÀú  ¼­ºñ½º¸¦ ´Ù½Ã ¿Ã¸®Áö¾ÊÀ¸½Å°Ç ¾Æ´Ñ°¡¿ä?
     
nelson1945 2023-08
¼­ºê³Ý ¸Å´ÏÀú°¡ OpensmÀ» ¸»¾¸ÇϽô°ǰ¡¿ä?
±âÁ¸OS´Â CentOS7.4, ½Å±Ô·Î ¼³Ä¡ÇÑ°Ô CentOS 7.9Àε¥ ÇØ´ç ¼­ºñ½º ¼³Ä¡ ¾øÀÌ ¿¬°áÀÌ Àß µÇ¾ú¾ú½À´Ï´Ù
Ưº°ÀÌ µû·Î ¼³Á¤ÇÑ°Ç ¾ø°í ³×Æ®¿öÅ©¸Å´ÏÀú·Î ¾ÆÀÌÇǸ¸ ³Ö¾îÁÖ¸é µ¿ÀÛÇß¾ú´Âµ¥
µÎ´ë´Â ¼³Ä¡ÇÏÀÚ¸¶ÀÚ ¾ð¸µÅ© »óÅÂ, ÇÑ´ë´Â ÄÉÀÌºí ½º¿ÒÇÏ´Ï ¾ð¸µÅ©, ³ª¸ÓÁö ¼­¹öµéÀº ½ºÀ§Ä¡ Àü¿ø ³»·È´Ù ¿Ã·È´õ´Ï ÀüºÎ ²÷°Ü¹ö·È½À´Ï´Ù ¤Ð¤Ð
          
¼­ºê³Ý ¸Å´ÏÀú´Â Àüü ¼­¹öÁß 1´ë¿¡¸¸ ¼­ºñ½º¸¦ ¿Ã¸®¸éµË´Ï´Ù
°¢ ¼­¹ö¿¡¼­ opensmd ¼­ºñ½º µ¹°íÀÖ´ÂÁö È®ÀÎÇغ¸°í ¼­ºñ½º°¡ È®ÀÎ ¾ÈµÇ¸é 1´ë¿¡ ¼­ºñ½º ¿Ã·Áº¸¼¼¿ä
OpenSMÀ» °¢ OS¿¡¼­ ¼­ºñ½º·Î ¿Ã·Áº¸½Ã°í ±×°Ô ¾Æ´Ï¸é ´Ù¸¥ ¿øÀÎÀ» ã¾Æº¸½Ã´Â°Ô ÁÁÀ»µí ÇÕ´Ï´Ù.

[Pkgs] - OpenSM ¼³Ä¡
https://kb.linbit.com/enabling-rdma-support-in-linux

[ibstat]
https://www.ibm.com/docs/ko/aix/7.2?topic=i-ibstat-command

[mstconfig]
https://docs.nvidia.com/networking/display/RHEL9/SR-IOV+Configuration

# lspci | grep Mell
87:00.0 Infiniband controller: Mellanox Technologies MT28908 Family [ConnectX-6]
87:00.1 Infiniband controller: Mellanox Technologies MT28908 Family [ConnectX-6]

# mstconfig -d 87:00.0 query

# Set port mode to infiniband
mstconfig -d 87:00.0 set LINK_TYPE_P1=1


QnA
Á¦¸ñPage 4109/5680
2014-05   4945697   Á¤ÀºÁØ1
2015-12   1482394   ¹é¸Þ°¡
2017-01   4151   ÇÏÆÛµ¥ÀÏ
2023-08   2796   nelson1945
2022-02   1834   µå°í
2016-05   4193   FullMoon
2021-01   2325   ¸Ó¸®°¨ÀÚ
2017-05   3745   Èĸ®±â
2016-06   6234   dreamer74
2017-06   3671   ¼¼À̽÷οì
2017-06   3285   ³ªºñz
2016-07   10233   ³ª¶û¸»¸»
2016-08   5425   ¸¼Àº¿©¸§
2016-06   4119   ¿¡À̾¾ÇÇÀ¯
2016-06   4120   AplPEC
2014-03   4178   ºü½Ã¿Â
2021-06   1589   Psychophysi¡¦
2017-10   4224   ºü½Ã¿Â
2023-07   1166   ´ÙÇÔ²²½Î´Ù±¸
2018-04   5775   º½µéÆÇ¿¡¼­´Ù
2018-05   3288   À̼±±Ô
2023-10   3281   ±èȲÁß