AVAGO MegaRAID SAS 9361-8i
SAS 16T x6개
ZFS 설1221;
zfs set atime=off DATA
zfs set recordsize=1M DATA
zpool set ashift=12 DATA
JBOD (Non-RAID) + ZFS RAIDZ
fio --directory=/DATA/ -ioengine=libaio -bs=1M -fdatasync=1 -thread -rw=randrw -size=100G -filename=fio_randread_write_test.txt \
 -name='ZFS-RANDRW' -iodepth=32 -runtime=300 -numjobs=16 -group_reporting -rwmixwrite=70
read: IOPS=286, BW=287MiB/s (301MB/s)(84.0GiB/300055msec)
write: IOPS=670, BW=671MiB/s (703MB/s)(197GiB/300055msec); 0 zone resets
RAID5 (R=Read Ahead Always|WB=WriteBack|C=Cached IO) + ZFS
fio --directory=/DATA/ -ioengine=libaio -bs=1M -fdatasync=1 -thread -rw=randrw -size=100G -filename=fio_randread_write_test.txt \
 -name='ZFS-RANDRW' -iodepth=32 -runtime=300 -numjobs=16 -group_reporting -rwmixwrite=70
read: IOPS=61, BW=61.8MiB/s (64.8MB/s)(18.1GiB/300009msec)
write: IOPS=143, BW=144MiB/s (151MB/s)(42.1GiB/300009msec); 0 zone resets
RAID5 (NR=No Read Ahead|WT=WriteThrough|D=Direct IO) + ZFS
fio --directory=/DATA/ -ioengine=libaio -bs=1M -fdatasync=1 -thread -rw=randrw -size=100G -filename=fio_randread_write_test.txt \
 -name='ZFS-RANDRW' -iodepth=32 -runtime=300 -numjobs=16 -group_reporting -rwmixwrite=70
read: IOPS=8, BW=8260KiB/s (8458kB/s)(2420MiB/300015msec)
write: IOPS=18, BW=18.4MiB/s (19.3MB/s)(5518MiB/300015msec); 0 zone resets
AVAGO MegaRAID SAS 9361-8i
SAS 16T x6개
ZFS 설정
이것은 Lsi-9361-8i 의 성능입니다..
진짜로 성능을 느껴 보려면..
인텔 골드 cpu 2개
RAM 192GB 이상
SAS 16TB x 16
12G SAS HBA x 2장
Cache : SSD 256GB x 2개
RaidZ2 설정
40G Ethernet 2 Port
--- 이런식으로 하면.. 메인보드+cpu+Ram 이 거대하고 막강한 레이드 컨트롤러가 됩니다.
손바닥 만한 레이드 컨트롤러 보다 더 강해져요...
ZFS 는 램이랑 CPU가 정말 안받쳐주면 성능은 둘째고 안정성에도 문제가 생길까요? 저렴하게 하나 테스트해볼려고 구성해보려 생각하고 있는중입다.
정전되면 깨집니다. ZFS 사용시 캐쉬달린 레이드카드 쓰지 말라고 항상 권고합니다. 그래서 HBA 카드로 ZFS 쓰는거랍니다.
레이드카드 쓰면 커밋완료를 레이드카드에서 끝나기 때문에 OS단에서는 완료 데이터로 인식이 됩니다. 이런 순간에 정전되면 그냥 크래쉬입니다. 단일파일 한두개 깨지는거야 문제가 안될수 있는데 VOL 구성이면 뭐 재앙입니다.