쪽팔리면 질문하지 맙시다. 소중한 답변 댓글을 삭제하는건 부끄러운 일 입니다
안녕하세요. SB7890 infinibend 스위치를 사용중입니다.
해당 스위치에 서버가 6대정도 물려있는데 4대의 OS를 재설치하게 되었습니다
재설치후 2대는 정상적으로 링크가 붙었으나 2대는 다운링크인 상태로 스위치에서도 주황불로 점등되며 통신이 안되네요..
정상적인 서버 1대의 케이블과 안되는 서버의 케이블을 스왑해봤는데 결과는 동일했습니다. 문제는 정상적인 서버도 주황불이 들어오며 통신이 안되더라구요;;
스위치 문젠가 싶어 스위치 전원을 내린 후 다시 올렸더니 전체 포트LED가 주황불이 들어오면서 통신이 전부 끊겼습니다..
해결방법이 있을까요? 관리콘솔도 없는 모델인것같아서 어떻게 확인해야 할지 막막하네요..
기존OS는 CentOS7.4, 신규로 설치한게 CentOS 7.9인데 해당 서비스 설치 없이 연결이 잘 되었었습니다
특별이 따로 설정한건 없고 네트워크매니저로 아이피만 넣어주면 동작했었는데
두대는 설치하자마자 언링크 상태, 한대는 케이블 스왑하니 언링크, 나머지 서버들은 스위치 전원 내렸다 올렸더니 전부 끊겨버렸습니다 ㅠㅠ
각 서버에서 opensmd 서비스 돌고있는지 확인해보고 서비스가 확인 안되면 1대에 서비스 올려보세요
[Pkgs] - OpenSM 설치
https://kb.linbit.com/enabling-rdma-support-in-linux
[ibstat]
https://www.ibm.com/docs/ko/aix/7.2?topic=i-ibstat-command
[mstconfig]
https://docs.nvidia.com/networking/display/RHEL9/SR-IOV+Configuration
# lspci | grep Mell
87:00.0 Infiniband controller: Mellanox Technologies MT28908 Family [ConnectX-6]
87:00.1 Infiniband controller: Mellanox Technologies MT28908 Family [ConnectX-6]
# mstconfig -d 87:00.0 query
# Set port mode to infiniband
mstconfig -d 87:00.0 set LINK_TYPE_P1=1