윈도우 2012R2 저장소 풀 (내용 추가)
http://www.2cpu.co.kr/bbs/board.php?bo_table=bmt&wr_id=1061 (824)http://www.2cpu.co.kr/bbs/board.php?bo_table=bmt&wr_id=1052 (839)
소프트웨어 레이드의 일종으로 생각되어서...이쪽으로 올립니다.
순차 읽기/쓰기 성능이 느린 것은 좀 부담이 되기도 합니다만...실제 파일 복사시에는 좀 더 속도가 잘 나오는 것 같기도 합니다.
아래는...이번에 저장소 풀 때문에 삽질하면서 알아낸 내용들입니다.
델 T20 에 적용되었으며...CPU 는 E3-1225V3 로 변경한 상태입니다.
2.5인치 일반 노트북용 히타치 Z7K500 4개 + Intel 313 Series 24GB SLC mSATA (BMT 링크#1) 2개를 이용해서
미러링으로 저장소 풀을 계층화해서 생성했습니다.
이때...나중 쓰기 캐쉬로 5GB 를 할당하고 계층화 용으로 15GB 를 할당했습니다. (PowerShell 스크립트 이용)
Hyper-V 가상화 게스트용 디스크로 사용하기 위해 설정했습니다.
먼저...하드디스크 2개만 레이드 0 으로 걸었을때 성능은 아래와 같습니다.
4K 성능 때문에 계층화를 시도했습니다. 아무래도 게스트 OS가 여럿 올라가면 순차 성능보다는 4K QD 성능이 중요해지지 싶었습니다.
계층화 된 벤치마크상 성능은 대충 아래와 같습니다.
계층화 용으로 사용한 SSD 가 느려서...순차 읽기/쓰기 속도가 느립니다. 빠른 SSD 를 쓰면 속도가 상당히 올라갑니다.
(아래에 다른 SSD 로 테스트한 링크 올려두었습니다)
소프트웨어 레이드이고...계층화 되어있는 SSD 때문에...읽기 속도는 측정할때마다 상당히 편차가 큽니다.
다만 쓰기 속도는 어느정도 일정하게 나오는 편이구요.
한편으론 느려보이긴 합니다만...부하가 적은 시스템이라...크게 무리없이 구동 중이며...체감상으로는 하드디스크만 이용하는 것에 비해 상당히 부드럽게 움직입니다.
순차 읽기/쓰기 성능이 느린 것은 좀 부담이 되기도 합니다만...실제 파일 복사시에는 좀 더 속도가 잘 나오는 것 같기도 합니다.
하드웨어 레이드가 아니어서 좀 아쉽지만...제법 쓸만 합니다.
추가로...게스트 OS 내부 (2012R2 입니다)에서 돌려본 벤치도 올립니다.
하드디스크에 비해서는 굉장히 부드럽게 움직이는 느낌이 들었던 건...역시나 4K QD 성능 덕분이지 싶습니다.
아래는...이번에 저장소 풀 때문에 삽질하면서 알아낸 내용들입니다.
1. SSD 와 HDD 를 계층화 해서 사용시...나중 쓰기 캐쉬 (Write Back Cache)가 각 가상디스크마다 1GB 씩 자동으로 할당된다...물론 SSD 에 용량이 남아있을때,,,
==> 가상디스크 생성을 파워셀 스크립트를 이용하면 캐쉬 크기를 조절할 수 있음.
==> 캐쉬는 한번 생성하고 나면 변경할 수 없음. (가상디스크 삭제 후 재 생성 해야함)
2. SSD 라 정전이 되더라도 쓰기캐쉬에 저장된 데이터가 날아갈 일이 없다.
==> BBU 불필요 (zfs 는 ZIL 설정을 하더라도...비동기 IO 는 메모리에만 저장되므로 정전시 데이터 손실이 발생한다)
3. 자주 사용되는 데이터는 SSD 에 보관하고...그렇지 않은 데이터는 HDD 에 보관한다...
==> 자주 사용되는 데이터를 구분하는 통계는 하루에 한번 생성된다. (해외포럼에서 그렇다고 하는군요.) 그래서 항상 어제 자주 사용했던 데이터가 SSD 로 갈 것 같다? (이건 좀 에러이지 싶습니다)
4. IO 부하가 많이 걸리는 경우 CPU 부하도 덩달아 올라간다...
==> 순차 읽기/쓰기는 크게 문제가 안되나 4K 부하에 대해서는 꽤나 예민하게 반응함. CPU 코어가 많고 클럭이 빠른 걸 쓸수록 전체 부하는 감소함.
5. OS 다시 깔아도 저장소 풀이 날아가지 않는다.
==> 하드디스크에 정보가 기록되나 봅니다. 다시 읽어들이는게 됩니다.
6. 크리스탈 디스크 인포 같은 툴로 보면 개별 디스크다 모두 보입니다.
==> 디스크 에러 모니터링이나 각 디스크별 온도가 궁금할때 유용할 것 같습니다.
[P.S]
잠시 테스트하는 와중에...MiSD T250 Absolute SLC SSD 128GB 에 하드디스크 2개 스트라이프 설정해서 테스트했었습니다.
BMT 링크#2 참조하세요.
ZFS의 경우 zpool, zvol의 write cache - disable로 해주셔야 제대로 ZIL이 작동합니다.
100% write I/O가 ZIL을 거치기에 정전에 강하지만 상대적으로 고성능 제품을 사용해야 합니다.
대표적인 예가 DRAM 기반의 Stec(현재 WD에 인수..ㅡㅡ) ZeusRAM입니다.
zfs 에서 write cache -disable 하기에는 사용중인 ssd 성능이 너무 느릴 것 같아...그렇게 설정하지는 않았는데요.
안해봤으니 한번 테스트 해보도록 하겠습니다.
잘 쓰지 않는 비동기 패킷만 처리해줘도 충분해서 굳이 그렇게까지 설정하지 않고 사용하고 있었습니다.
ZeusRAM 은 가격이 무지막지 하던데요. SAN 에 버금가는 대형 스토리지를 만드는게 아니고서는 쉽게 접근하기가 무리이지 싶더군요.
음...그나저나...저장소 풀에서...hot data 담는 주기는 어떻게 설정하는지요?
설정은 여러가지 요소를 감안하시어 최적의 시간대를 적용하시는 것을 권장해 드리고 싶습니다.
그럼 즐거운 하루가 되시길 기원하겠습니다...^^
이거 보신 적 있으세요? 꽤나 흥미롭습니다. 하하~
본격적으로 zfs 를 구동하고 있는 장비가 없어 테스트는 좀 무리스럽네요.
저렴한 가격이니 한번 해볼만 할 것 같습니다. ^^
그럼 즐거운 주말이 되시길 기원하겠습니다...^^