[CrystalDiskMark] Dual port Infiniband 20Gbps DDR CX4+Nexentacore 3.0.1 SRP target
제목 그대로 Dual port Infiniband 20Gbps DDR CX4+Nexentacore 3.0.1 SRP target
조합의 간단 테스트 입니다.
역시 기타 사양은 기존과 동일합니다.
여기서 주의할 점은 기존의 iSCSI가 아닌 RDMA 방식의 SRP target을 이용하였고,
24port IB switch를 사용하였습니다.
아직 세팅이 제대로 된 것이 아니기에 테스트 중 입니다.
* 본 테스트는 vSphere상에서 구동중인 VM상에서 진행하였으며, 포트를 10Gbps로 세팅하여 진행했습니다.
** 속도도 속도지만 RDMA(Remote Direct Memory Access) 위력은 무시할 수 없었습니다.
*** 이 테스트는 Physical machine이 아니라 vSphere Virtual Machine 내에서 진행하였습니다.
**** ioMeter 테스트도 진행해 보았는데, 최대 4k 130,000iops의 성능을 보여주었습니다.
새로 스토리지를 세팅하여 다시한 번 테스트해 보았습니다.
케이블 레벨과 현재 보유하고 있는 HCA가 PCIex 8x이지만 2.5G 제품이라 한계가 있습니다.
보유하고 있는 스위치는 24포트 제품이며, 8포트만 사용한다면 30Gbps로 세팅이 가능하지만
보유하고 있는 infiniband HCA가 최대 20Gbps까지만 지원하는 ConnectX 1세대 제품이라
더 이상은 무리라고 보여집니다. vSphere 상에서 iops 최적화까지 진행하였지만 이게 한계이며,
dual port HCA 이기에 1번 포트는 IB 설정으로 스토리지로 사용하고, 2포트는 ETH으로 설정하여
내부 고속 네트워크 (vMotion, FT등)로 활용하는 것도 한가지 방법일 것 같습니다.
하지만 IB외에 8개의 GbE도 장착하고 있기에 그리 큰 필요성은 느끼질 못해 dual port 모두 스토리지 용으로
사용할 예정입니다. 나중에 시간이 되면 Jumbo frame 설정도 해 볼까 하고 있습니다.
인피니밴드가 10G이더넷보다 싸길래 관심을 가져봤지만 그래도 비싸서 포기했는데, 위 그림을 보니 또다시 지름신이 꿈틀댑니다. ^^