HEUo김용민http://2cpu.co.kr/bbs/board.php?bo_table=QnA&wr_id=398562
최승현님의 댓글과 박영선님의 테스트 결과 답변을 보고 직접 테스트 해보기로 했습니다.
http://2cpu.co.kr/bbs/board.php?bo_table=QnA&wr_id=398596
우선 박영선님의 테스트처럼
동일한 ESXi 5.0.0 Update 3 1311175에
동일 vSwitch 상태로 VM을 복제하였고, VM 설정값과 iperf 결과는 아래와 같았습니다.
OS : Windows Server 2012 r2
CPU : 1 Socket / 2 Core
VGA : 128MB
RAM : 4GB
HDD : 20GB (느리게 비워지는 씩 프로비저닝)
vNIC 1 : VMXNET 3 (10Gbps)
vNIC 2 : VMXNET 3 (10Gbps)
이후 iperf에서는 1개의 NIC만 작동되더군요.
그래서 질문하게 된 SMB 3.0의 테스트를 위해 파일 탐색기를 사용하려고 보니
아무래도 디스크 속도 제한 문제로
아래의 MS MVP 포스팅에서 사용된 StarWind RAM Disk를 설치하였고
http://workinghardinit.wordpress.com/2013/05/01/using-ramdisk-to-test-windows-server-2012-network-performance/
http://www.starwindsoftware.com/high-performance-ram-disk-emulator
RAM을 7GB로 변경하여 StarWind RAM Disk를 5120MB로 설정,
CMD에서 아래 명령어로 4GB(4*1024*1024*1024=4294967296)의 파일을 생성해서 전송했습니다.
fsutil file createnew test 4294967296
전송 테스트는 때에 따라 20MB/s ~ 600MB/s의 속도를 보여 주는데...
대략 400MB/s 정도는 나와 주는 것 같습니다.
때문에...
그냥 설정값 중 vNIC 1개만 설정한 속도가 600MB/s 정도로 꾸준이 유지되기에..
그냥 vNIC는 1개만 연결하는 것이 좋내요^^;
#1
#2
#3
여러 vNIC를 구성하신후 SMB3.0 연결을 해보신건가요?
vSwitch 내부에서 vNIC를 2개 붙여서 SMB 3.0의 속도가 어떻게 나오나 확인해봤는데...
뭐 그냥 1개만 사용하는게 그래프가 출렁이지 않고 꾸준히 유지되어 가상간의 네트워크 전송에는
그냥 vNIC 1개만 사용하는게 좋더군요.
NIC를 VT-D로 직접 붙여서 운영하고 있습니다.
NIC 카드 꼽아서 VT-D해서 SMB 3.0 써보면 어떨지 궁금해지네요..^^;;
카드도 없고 디스크도 그린이라..헉!
지금 vSwich로 연결된 Intel 82583V 말고
AMT가 작동되고 있는 Intel 82579LM 가 1개 더 있는데...
요걸 Windows Server 2012 r2에 Passthrough로 추가로 연결시켜서
SMB 3.0의 성능을 향상 시켜 사용하려고 했는데...
이렇게 설정하면
AMT 문제인지 AMT로 접속도 않되고 Windows Server 2012 r2 장치관리자에서
"이 장치를 시작할 수 없습니다. (코드 10)" 오류로 사용을 못하고 있습니다ㅠ
AMT가 작동되고 있는 Intel 82579LM를 Management NIC로 설정하면
이번에는...
ESXi에서 DHCP IP를 읽어오지도 못하고...
이로 인해 vSphere Clinet의 접속도 않됩니다 ㅠ
놀랍군요!
StarWind RAM Disk가 핵심이군요.
작년말 사이트 구축시 2008R2로 파일전송 테스트는 진행해 본 경험이 있으나,
평균 50~80MB/S 정도였으며 100MB/S를 간신히 넘기는 경우가 최고값이였습니다.
램 디스크라... 램디스크 까진 안되더라도 SSD나 플래시 스토리지 쓰는 EMC쪽에 문의좀 해봐야 겠습니다.
vSphere maximum 자료에도 std vSwitch 내부 전송속도는 없습니다.
위 기술은 에뮬레이터의 성능에 최적화된 수치로 보이는데요.
vNetwork는 vmware core기반 기술이라 cpu퍼포먼스를 사용합니다.
(이것이 아니여도 10G부턴 시스템 부하량이 늘어나지요)
cpu변화량이 궁금해 지는군요. ^^;
이부분이 일정수치로 나와준다면 가상화 내부 디자인 구성에 많은 도움이 될듯 합니다.
스위치간의 데이터 전송량과 같은 내용은 vDS를 설치하시면 보일것 같군요.(Ent+)
vSphere가 5.5부터 멜라녹스를 지원하기 시작했는데요.
6.0대에 인피니밴드 에뮬레이터라도 나온다면...
아~ 이것보단 디스크 문제좀 먼저 해결해야 겠군요;
file level service에서는 최고라고 할 수 있는데 제대로 사용하려면 Infiband나 iWarp adapter가 필요합니다.
현재로서는 vt-D의 경우 제한점과 버그가 있기에 제대로 성능이 나오질 않습니다.
제대로 하려면 Windows Server 2012 R2 native 환경에서 테스트해야 합니다.
vSphere 6.0에서 vRDMA를 hypervisor에 내장할 예정인 듯 하나 아직은 prototype 상태인 것으로 알고 있습니다.
vSphere 6.0 나오면 RDM 설정을 GUI로...
Passthrough 오류 픽스 & VGA Passthrough 설정을 가상 바이오스에서 설정 가능,
AMT 지원되는 메인보드에서 이상없이 설치 및 작동이 가능하게 되었으면 좋겠습니다ㅠ
거의 1달간 ESXi 5.0 U3, ESXi5.1 U1, ESXi 5.5를 이리저리 설치해가면서 확인해 봤는데...
ESXi 5.0 U3에서는 VMware SVGA 3D Adapter가 성능이 떨어저 마우스 드래그 영역 표시가 딜레이되고 있고,
ESXi 5.1 U1에서는 USB PassThrough가 않되지만... 그나마 VGA Passthrough 성공글이 보이며...
ESXi 5.0 에서는 설치시 & 설치후 AMT로 원격접속을 하면 커널오류로 보라색 화면이 나와서 설정 포기했습니다.
https://social.technet.microsoft.com/Forums/ko-KR/ac83e616-31a2-4189-b576-3f504439952a/windows-server-2012-r2-smb302-?forum=winserver2012ko
C클레스 대역을 다르게 연결해야 작동한다고 하내요ㅠ