안녕하세요
esxi 6.7을 사용하고있습니다, vSAN / vMotion 트래픽을 인피니밴드 스위치로연결해서 호스트간 통신을 하려고하는데요
ConnectX-3 (Mellanox ConnectX-3 MCX354A-FCBT ) 카드를 각 호스트에 설치했습니다
하지만 esxi의 물리적 어댑터에서는 리스트에는 나타나지만 계속 Link down 상태로 되어있습니다.. 카드 펌웨어와 스위치 펌웨어는 모두 최신으로 업데이트했구요
혹시나싶어서 해당 카드를 패쓰스루해서 가상머신으로 올려보니 윈도우에서는 정상적으로 56G로 연결이 잘됩니다..
아무래도 ESXI 드라이버 문제인거같기도해서 찾아보니 멜라녹스 공홈에서는 ConnectX-3 타입의 카드 드라이버가 esxi 6.7버전으로는 안보이네요..
6.0이나 6.5나 이걸로 검색도 해보시구요~
esxi홈피에서 드라이버 함 검색해보세요
원인을 못찾겠어요..
40GbE는 지원하지만 스위치가 이더넷 스위치라야 가능할거 같고...
예전에 56Gb/s 지원하는 어댑터여도 네트워크 프로토콜이 아니여서 10Gb로 사용했다는 말도 들었습니다.
TCP/IP 드라이버가 로딩되지 않으면 안될거고 스위치 역시도 인피니티밴드 스위치 전용이라면 10G/40G 이더넷 스위치 겸용이 아니면 지원불가가 맞을겁니다.
스토리지 액세스 전용이라면 인피니티밴드 프로토콜을 사용하는게 맞을거고 네트워크까지 같이 사용할거면 스위치가 네트워크 스위치를 지원해야 가능한 시나리오였습니다. 몇년전엔 그랬는데 지금은 어떨지 모르겠네요.