Mellanox ConnectX-3 CX311A  

묵혀놨다가 쓸일 있어서 다시 꽂았는데 데탑에 달린게 많으니 슬롯 활용하기 참 어렵네요.

이쪽으로 전문지식이 있지 않아서 예전에 했던 셋팅 다 잊어먹고 다시 삽질해가면서 완료 했습니다. 

한쪽이 속도 반토막도 안나와서 종일 잡고 있었네요.

A컴. pcie 3.0x4 (글카 슬롯 공유 x16반토막 해서 x8슬롯 사용)                              B컴. pcie 2.0x4

처음 설치시 한쪽만 속도 반토막 나서 한참 헤메다가

윈도우 드라이버말고 멜라녹스(현재 nvidia)에서 드라이버 받아서 새로 설치했습니다.

MTU,Jumbo packet 값 설정하고 테스트 하니 속도 잘나옵니다.

먼저 jumbo packet 값은 최대값(9614)으로 잡아주고 MTU값은 적용 가능한 최대값 근처로 설정, 

드라이버 속성에 있는 performance에서 default로 튜닝 해줬습니다.

performance 튜닝 옵션 정보는  링크에서 확인하시면 됩니다. 어려운 내용들이라 간단히만 보고 넘겼습니다. 

General Performance Optimization and Tuning - WinOF v5.50.52000 - NVIDIA Networking Docs 

아래는 테스트 결과 입니다.

pcie 3.0x4 -> pcie 2.0x4  

속도는 만족 스럽네요.

pcie 2.0x4 -> pcie 3.0x4  

대역폭 최대치는 10G를 오버 하지만 속도차가 조금 납니다.

pcie 3.0x1 -> pcie 2.0x4  

x8슬롯을 다시 글카에게 넘겨주고 x1으로 셋팅 했네요. 양쪽 속도차이 거의 없습니다.

이상태에서 performance 튜닝 했더니 속도 살짝 떨어졌습니다. 설정 맞춰봐도 이값은 다시 안나오네요.

이제 글도 남겨놨으니 다음엔 삽질 안할것 같습니다. :-)