안녕Ȣ16;세요 선0176;님들 네린1060; 1656;문 드립니다!
1228;목과 같1060; 해NJ17; 1109;비를 셋ᔚ1; 할 기회가 생겨서 1060;번에 시행착오를 겪1004;며
열심7176; 구성1012; 해보lj16; 1473;1064;데, 너무 .160;서없1060; 1652;행1012; Ȣ16;여 뭐가 Ǻ12;떻,172; 해서
통신1060; 가능Ȣ16;,172; .104;었lj16;1648;에 대해 1060;해가 너무 떨Ǻ12;1665;니다ㅠ
왜 리눅스 서버에서 Ǻ12;떠한 설1221;1012; Ȣ16;고, 1064;피니0180;드에 Ǻ12;떠한 설1221;1012; 해서 통신1060; .104;lj16;1648;에 대해 아1649;도 헷갈리네요...
그리고 QM87001032; 데1060;터시트 상에lj16; QSFP56 40포트라고 .104;Ǻ12;1080;고 QSFP+에 대한 내용1008; 없lj16;데,
QSFP+ lj16; 1648;원Ȣ16;1648; 않lj16;1648;도 Ƽ17;금합니다!
많1008; 선0176;님들1032; 1312;Ǻ16; 0143; 1656;타 ǥ12;ᓠ1;드립니다! 감사합니다!
1109;비 : Mellanox QM8700, Dell R760 서버 *2(Rocky Linux 8.6)
설1221; 사항 :
(1) QM 8700 : ib 0(192.168.0.1/24), web user interface O
(2) R760 (1) : ib 0(192.168.0.44/24), opensm 구ᇼ1; 1473;(QM8700 웹UI 상에서 Subnet Manager is running remotely 라고 관찰 .120;)
(3) R760 (2) : 0120;설1221;
스위치와 서버사이에 IPoIB로 연결되어서 서로 통신하고 있습니다 ( QM8700는 인피니밴드 스위치네요.)
리눅스 서버에 설치된 (멜라녹스)어뎁터가 IB 모드로 동작하고
Dell S4128T-ON <-> QM8700 <-> R760 (1), (2) 연결을 해보았습니다ㅠ
Subnet Manager is running remotely
QM8700의 네트워크 Spec을 확인 하여야 합니다. 프로토콜이 지원 될 수도 있고. 아닐 수도 있고 해서..
[root@localhost ~]# ibping 192.168.40.44
ibwarn: [153453] _do_madrpc: recv failed: Connection timed out
ibwarn: [153453] mad_rpc_rmpp: _do_madrpc failed; dport (Lid 192)
ibwarn: [153453] _do_madrpc: recv failed: Connection timed out
ibwarn: [153453] mad_rpc_rmpp: _do_madrpc failed; dport (Lid 192)
--- (Lid 192) ibping statistics ---
3 packets transmitted, 0 received, 66% packet loss, time 4922 ms
rtt min/avg/max = 0.000/0.000/0.000 ms
그렇기 때문에 Dell S4128T-ON과는 연결이 불가능 합니다
QM8700은 Ethernet Switch 아니고..
인피니벤드는 IP 주소를 쓰지 않고.. Mac Address 주소를 사용합니다.
위처럼
IP 주소를 더 해 주시려면..
IP over iB 를 설정하고..
각 호스트별 IP 주소를 지정한 후에 사용 가능해 집니다.
QM8700 Subnet를 가지고 있기 때문에 Node 들은 OpenSM를 실행할 필요 없습니다.. 혼선만.,..