김서방 2014-04

감사합니다. 참고하도록 하겠습니다.
사용하셨던 옵션도 같이 올려주실 수 있으실런지요?
raidz1+z1 이라는 말씀은 현재 구성이 raidz 를 striped 했다는 말씀이신거죠?

설영수 2014-04

Raid는 Raid 5+0 .

iozone 옵션은 하기와 같습니다.

iozone -R -l 1 -u 1 -r 4k -s 1g -F /pool/iozone.1

스레드변경

iozone -R -l 5 -u 5 -r 4k -s 1g -F /pool/iozone.1 /pool/iozone.2 /pool/iozone.3 /pool/iozone.4 /pool/iozone.5

김서방 2014-04

같은 옵션을 주셨네요. 좀 더 비교가 쉽겠습니다. 감사합니다.
보여주신 ssd 로 묶은 수치하고 현재 구동되는 H/W raid5(15k*12EA) 하고 비교해보니 오히려 H/W 방식의 raid가
성능이 더 높게 나오는군요..음
ext3 on Linux 입니다.
"Throughput report Y-axis is type of test X-axis is number of processes"
"Record size = 4 Kbytes "
"Output is in Kbytes/sec"

"  Initial write "  549518.81

"        Rewrite " 1153329.50

"          Read " 1918343.00

"        Re-read " 2026617.12

"  Reverse Read " 1526311.50

"    Stride read " 1426618.62

"    Random read " 1388459.50

" Mixed workload " 1349121.00

"  Random write " 1067320.25

"        Pwrite "  454728.25

"          Pread " 1883543.25

"        Fwrite " 1076112.75

"          Fread " 1904742.62

zfs 의 기본 블럭사이즈의 특성 때문일까요?
좀더 벤치마크 테스트를 해봐야겠습니다.

설영수 2014-04

PCIe 3.0 기반 신형 HBA가 아닌지라 제 시스템에서는 이게 한계치 입니다.  대역폭만 미친듯이 높은게 함정이죠 흑흑.

혹 김경민님 테스트 사양이 어떻게 되시나요?

김서방 2014-04

현재 nfs서버로 사용하는 녀석이 netapp FAS270과 Dell 720xd(15k 600G 12EA Raid5) 인데
공간 부족으로 인하여 새로 nas서버를 구축중에 있습니다.
현재 구매한 녀석은 Dell R620+md1220(2.5" 10k 600G  16EA)  with LSI 9207-8e 입니다.
제 시스템은 현재 올려주신 SSD  벤치 결과와 비교하면 4k 에서는 한 1/3 정도의 성능이 나오는 듯 합니다.
1024k에서는 나쁘지 않고 4k 결과만 그런것 같습니다.
최소한 720xd  에 근접해야 하는데 실제로 NFS서버 올려서 좀더 확인해 봐야 될듯 합니다.
R620 에 달린 브로드컴 랜카드가 넥센터나 기타 opensolaris 기반 os들에서 지원이 안되서 그것도 하나의 문제입니다.
일단은 omnios+naap-it 조합으로 벤치마크 중입니다.

설영수 2014-04

zfs recordsize, ashift=12, zfs vdev max pending 설정도 조절해 보시고요

iozone test size도 10g로 바꿔 테스트 해보시는게 좋을꺼 같습니다.

김서방 2014-04

조언 감사합니다. 일단 파일시스템 기본값으로 성능데스트 마치고 끝나면 튜닝 들어가야겠습니다.
마침 넥센타 4.0.1 버전도 나왔으니 일단 넥센타를 오늘 설치하고 테스트 작업 들어갈 생각입니다.
부디 브로드컴 랜카드를 지원해주길 기대해 봅니다.
정 안되면 illumos 직접 빌드해서 드라이버 올려야 될지도 몰겠네요

설영수 2014-04

4.0.1이 나왔군요  저도 시간나면 새로 설치해봐야 겠네요 ^^;

illumos kernel base니 넥센타에서도 BCM5771X 는 인식될듯 하네요. 텐쥐쪽은 저도 intel 과 emulex oce11102 계열만 테스트해본지라

좋은 결과 있으시기를 바랍니다.