MicroServer Gen8 하이퍼바이져간 I/O 간략 보고서 겸 질문글입니다.

낙원전자   
   조회 5086   추천 0    

 가상화 환경에서 저장소로 고통받고 있어서 시간을 들여 제가 생각하고있는 하이퍼바이저 환경에서의 디스크 I/O 속도 측정을 해봤습니다.

[Environment]

HP MicroServer Gen 8 + E3-1230-v2 + 8GBx2

B120i 각 하드를 단독 RAID 0 지정 : 

 1. 삼성전자 1TB Spinpoint F3 HD103SM (SATA3/7200/32M)

 2. 삼성전자 250GB SSD 850EVO

 3. x

 4. x

SPP2016.10 최신 펌 적용

[Condition]

하이퍼바이저 설정은 Hyper-V는 2세대, ESXi는 11버전, 하드디스크 셋팅은 '설정파일(SSD에 저장) + 1번하드(SSD, 32GB, 운영체제설치 및 부팅) + 2번하드(HDD, 127GB)'에 1번하드,2번하드 모드 Thick(씩) 프로비저닝 적용(ESXi는 빠르게 비워지는 씩 프로비저닝)
Native 구동의 경우 HD Tune에서 성능 측정할 하드 크기를 제한함,

1. Native 구동(대조군) : Windows Server 2016 Datacenter GUI(SSD에 설치)+SPP2016.10 Automotive(Automation?)으로 드라이버 및 관리 프로그램 설치

2. Windows Server 2016(SSD에 설치)의 Hyper-V : Windows 10 + 기본 드라이버만 사용

3. ESXi6.0.0U2(10월 26일 최신빌드, SSD에 설치) + hpvsa88(ESXi5.5.0 드라이버로 교체) : Windows 10 + 기본 드라이버만 사용(VMWare Tools 설치 전후 차이 없음)

4. ESXi6.0.0U2 + hpvsa100(문제가 되고있는 최근 드라이버이자 기본 드라이버) : Windows 10 + 기본드라이버만 사용


[Experiment]

CrystalDiskMark로는 테스트한 그대로 기록

HD Tune로는 SSD는 읽기와 랜덤 읽기만, HDD는 읽기, 쓰기, 랜덤 읽기, 랜덤 쓰기 모두 기록


[Result]

CrystalDiskMark

항목네이티브WS2016
ESXi6U2
+hpvsa88		ESXi6U2
+hpvsa100
Read
(SSD)		Seq Q32T1545.6539.5550.9336
4K Q32T1342.6217.1318.210.57
Seq522.8529.751588.29
4K39.0629.3739.730.344
Write
(SSD)		Seq Q32T1526.8497.5529.2330.5
4K Q32T1324.8174237.410.48
Seq521.3473.1502.388.72
4K126.153.9978.990.347
Read
(HDD)		Seq Q32T1140.1114.381.185.96
4K Q32T11.1491.1441.0821.088
Seq140.7139.597.9487.87
4K0.6720.5790.6660.343
Write
(HDD)		Seq Q32T1146.8145.6104.2104
4K Q32T11.3121.3291.3691.27
Seq146.2144.9104.488.3
4K1.3281.3181.2610.352


HD Tune Pro

대분류중분류소항목네이티브WS2016ESXi6U2
+hpvsa88		ESXi6U2
+hpvsa100
Disk
Benchmark
(SSD,Read)		Transfer Rate
 Minimum (MB/s)		476335.6476.74.8
Transfer Rate
 Maximum (MB/s)		542.3530.7529.75.5
Transfer Rate
 Average (MB/s)		530.5500.55215.3
Access Time (ms)0.0590.2210.12511.8
Burst Rate (MB/s)3260.7800.21613.2
CPU Usage (%)311.613.61.1
Disk
Random
Access
(SSD,
Read)		operation
 / sec
(IOPS)		512 bytes163181841724786
4 kb174261758756786
64 kb56921482353287
1 mb50831943387
Random94755676086
avg.
access
time
(ms)		512 bytes0.061 0.543 0.137 11.518 
4 kb0.057 0.568 0.132 11.577 
64 kb0.175 0.674 0.283 11.378 
1 mb1.967 3.132 2.304 11.458 
Random1.054 1.795 1.315 11.500 
max.
access
time
(ms)		512 bytes2.527 30.450 1.706 12.544 
4 kb0.883 29.133 1.193 12.283 
64 kb0.976 30.450 1.232 12.572 
1 mb3.177 33.374 3.710 14.217 
Random2.734 32.441 3.144 14.127 
avg.
speed
(MB/s)		512 bytes7.968 0.899 3.539 0.042 
4 kb68.071 6.871 29.562 0.337 
64 kb355.777 92.633 220.811 5.493 
1 mb508.366 319.221 433.909 87.274 
Random480.973 282.602 385.829 44.119 
Disk
Benchmark
(HDD, Read)		Transfer Rate
 Minimum (MB/s)		131.578.268.55
Transfer Rate
 Maximum (MB/s)		145.3142.695.95.4
Transfer Rate
 Average (MB/s)		138.6135.785.55.300 
Access Time (ms)9.019.439.714.6
Burst Rate (MB/s)3215.6584.81834.15.2
CPU Usage (%)1.63.12.115.7
Disk
Benchmark
(HDD, Write)		Transfer Rate
 Minimum (MB/s)		103.6100.147.71.2
Transfer Rate
 Maximum (MB/s)		161.3156.6123.35.4
Transfer Rate
 Average (MB/s)		136.6131.386.55.2
Access Time (ms)5.445.225.911.6
Burst Rate (MB/s)3243746.71787.75.2
CPU Usage (%)1.43.52.61.7
Disk
Random
Access
(HDD,
Read)		operation
 / sec
(IOPS)		512 bytes11110810468
4 kb11310710470
64 kb104959664
1 mb44433128
Random72685946
avg.
access
time
(ms)		512 bytes8.976 9.221 9.568 14.693 
4 kb8.839 9.286 9.581 14.134 
64 kb9.582 10.486 10.369 15.482 
1 mb22.495 22.810 31.573 35.274 
Random13.803 14.552 16.807 21.648 
max.
access
time
(ms)		512 bytes26.223 33.084 23.375 52.081 
4 kb19.171 27.113 46.689 54.130 
64 kb21.703 32.279 19.205 53.071 
1 mb35.506 44.962 103.935 77.600 
Random29.348 58.487 39.487 65.566 
avg.
speed
(MB/s)		512 bytes0.054 0.053 0.051 0.033 
4 kb0.442 0.421 0.408 0.276 
64 kb6.522 5.960 6.027 4.037 
1 mb44.454 43.840 31.672 38.349 
Random36.758 34.866 30.188 23.438 
Disk
Random
Access
(HDD,
Write)		operation
 / sec
(IOPS)		512 bytes19420317886
4 kb16317014487
64 kb13915011985
1 mb57454245
Random797366366
avg.
access
time
(ms)		512 bytes5.130 4.912 5.607 11.499 
4 kb6.120 5.858 6.918 11.449 
64 kb7.152 6.646 8.388 11.685 
1 mb17.394 22.118 23.602 21.808 
Random12.593 13.570 15.717 14.965 
max.
access
time
(ms)		512 bytes81.503 73.836 19.270 13.320 
4 kb21.562 57.243 22.061 12.523 
64 kb29.973 43.692 31.310 105.221 
1 mb473.144 137.928 607.810 130.618 
Random120.772 47.021 165.953 67.971 
avg.
speed
(MB/s)		512 bytes0.095 0.099 0.087 0.042 
4 kb0.638 0.667 0.565 0.341 
64 kb8.738 9.403 7.450 5.349 
1 mb57.490 45.211 42.368 45.854 
Random40.291 37.389 32.283 33.904 


[Conclusion]

개판입니다.....개판.......

WS2016+Win10에서 SSD IOPS가 너무 낮게 나옵니다.......

WS2016+Win10에서 HDD성능은 ESXi6.0.0U2+hpvsa88보다는 안정적으로 나오는데 큰 차이를 보이지는 않고 있구요.


[Quation]

어떤걸 써야하나요......일단 저는 너무 처참한 SSD IOPS성능때문에 ESXi6.0.0U2+hpvsa88 조합으로 생각하고 있고, 이거보다 더 좋은 방안을 가지고 계신분이 있으면 그 방법대로 가려구요.

ps. 테스트하고 싶은 시스템이 있으면 알려주십시오. 대신 테스트해드립니다.

ps2. 2cpu 게시판은 표의 테두리가 없는게 기본인거 같군요
개인 블로그: https://nakwonelec.blog
짧은글 일수록 신중하게.
김황중 2016-11
HP 펌이 들어 있는 하드로 해보셨으면 더 확실하지 않았을까 싶네요.
HP에서는 서드 하드에 대한 호환성 문제를 보장하지 않거든요...

그리고..B씨리즈의 레이드 카드 성능은..... 그닥입니다.
번들은 번들일뿐...
     
낙원전자 2016-11
B120i 레이드카드성능은 익히 알고있었습니다. 거의 소프트웨어 레이드와 별반 차이없는......
이 글을 쓰게 된게 하이퍼바이저 host 운영체제에서 스토리지 드라이브를 얼마나 잘 프로비지닝해주는지 확인해보려는 목적이어서 대조군으로 네이티브를 같이 확인해본거구요.
HP 하드 취급하는 곳이 있습니까? 일반판하고 HP판하고 비교해보면 좋을거 같군요.
     
낙원전자 2016-11
이지X버 여기서 보니까........억소리나게 비싼거같은....
저는 상용서비스로 굴릴것도 아니고 걍 HGST 데스크스타나 써야겠군요.......
          
김황중 2016-11
네 일반 하드대비 3배정도.....^^;;
로그인 하시면 댓글을 남길 수 있습니다


QnA
쓰기
제목Page 2768/5683
2014-05   4955444   1 정은준1
2015-12   1491949   1  백메가
2016-11   5091   1 이하나
2014-11   5091   1 나파이강승훈
2017-02   5091   1 송진현
2014-10   5091   1 윈도우10
2006-08   5090   1 박동섭
2006-07   5090   1 이제호
2016-03   5090   1  회원K
2007-08   5090   1 전태준
2016-02   5090   1 임보민
2009-04   5090   1 하상필
2012-09   5090   1 이주황
2006-06   5090   1 이일영
2006-01   5090   1 소현준
2006-02   5090   1 신유호
2006-08   5090   1 문추기
2007-10   5090   1 김상일
2020-05   5090   1 캔위드
2013-12   5090   1 강현욱00
2013-01   5089   1 전주영
2006-06   5089   1 김영광
목록
쓰기