삽질을 한 결과 SSD 장치에서는 안정성을 희생해서라도 Disk Write Cache Mode 를 활성화 해줘야합니다.
대부분의 엔터프라이즈, 워크스테이션 SSD 드라이브는 내부에 정전 및 패닉 대비용 캐패시터가 있으니 중요 데이터를 보관하는
SSD 레이드 어레이에서는 캐패시터가 있는 모델을 사는게 좋겠습니다. :D
개별 컨트롤러 카드에 다음과 같이 연결되어 있습니다.
12 x 2TB SATA3 HDD (ARC-1880ix-12 1번 연결, JBOD, mode)
4 x 512GB SATA3 SSD (ARC-1880ix-12 2번 연결, JBOD mode)
SSD의 FIO mixed workload 테스트에서 단일 SSD의 IOP가 200~600 IOPS 단위로 처참하게(마치 하드디스크를 보듯이...) 나오는데 정상인가 싶습니다.
SSD 품명은 다르지만 비슷한 기술의 2D NAND MLC 120기가는 Mixed workload(읽기 25%, 쓰기 75%) 에서 단일 SSD가 1~20000 IOPS가 나옵니다...
HDD의 4 member disk raid10과 비슷하게 나오는 수준이라 황당하네요.
아레카의 자체 테스트 툴인 xfer speed 로 측정하면 모든 디스크가 시퀀셜 속도가 정상인거 보면 케이블 불량은 아닌걸로 보입니다.
설정이 문제일까요 아니면 컨트롤러의 한계일까요?
컨트롤러 펌웨어는 최신 버전이고 운영체제는 fedora 29 입니다.
NAND 장치들의 컨트롤러가 대용량 DRAM 캐시를 성능과 수명을 위해 활용한다는 사실을 망각하고 하드디스크처럼 취급해서 이런일이 생겼네요...
하하... 마치 dramless가 아닌놈을 dramless로 취급해버렸습니다.
바빠도 돌아가란 말이 괜히 있는말이 아닌거 같습니다.
물론 레이드 카드의 캐쉬빨로 어느 정도는 속도 보상이 됩니다..
1880이면 DDR3 메모리 일텐데 캐쉬 크게 키워 보시는 것도 퍼포먼스 향상에 도움이 될 수 있습니다..
밴치마크 프로그램의 숫자가 올라가는 것 말고 좀 더 많은 부하에서 잘 견딜 것입니다...
가격이 한 가격하는걸로 알고 있습니다. 4GB 한 개가 금값보다 비쌌습니다... 하하
DDR3를 사용하는 1882/1883 모델은 카드 한 개 가격이 백만원대가 넘는 녀석들이라 취미로 사기에는...
언제나 고생 많으십니다. 좋은 정보 새겨 듣겠습니다 :D
둘 다 체널이 한두개 고장나서 인식이 안되고 합니다만 기본적으로 사용 모드가 JBOD밖에 안 사용하기에 당장 큰 불편은 없습니다..
저도 DDR2 Unbuffer ECC 메모리가 1기가 짜리가 꼽혀 있는데 2기가가 맥시멈이더라고요..
구하고는 싶은데 물건이 보이지도 않고 금값인지라 좀 그렇습니다..
그냥 쓰던지 해야겠습니다.
1. OS cache
2. Raid controller cache
3. disk cache
이것들 중에서 3번이 문제인데요. HDD나 SSD나 3번 디스크 자체 캐시를 on으로 하는 것이 성능이 좋습니다.
그러나 UPS를 쓰거나 disk 자체에 power failure protection 기능이 있는 경우(기업용 ssd)가 아니라면 정전시 데이터가 날아가 버립니다. 이것은 2번 콘트롤러 캐시가 배터리나 capacitor로 보호되는 경우에도 마찬가지입니다. 2번 캐시가 보호된다고 하여 3번 캐시가 보호되는 것은 아니니까요. 결국 3번 캐시가 보호되지 않는다면 2번 캐시 보호도 의미가 없어집니다.
그래서 raid 카드에서는 3번 캐시를 default로 off로 만들어 버리는 것이 보통입니다. 이게 HDD의 경우에는 off로 해도 2번 콘트롤러 캐시가 받쳐주므로 크게 상관이 없는데, SSD 중에는 성능에 치명적 손실을 주는 경우가 많습니다.
disk cache를 on으로 세팅하면 성능이 회복될 것입니다. 단 이 경우 UPS를 사용하거나 SSD에 자체 power protection 기능이 없다면 2번 캐시의 protection이 별 의미가 없어지게 됩니다. 더 밑바닥에 있는 것이 보호되지 않으므로... 임금이 성군이라도 사또가 변학도이면 큰 의미가 없는 것이나 마찬가지.
임금이 성군이라도 사또가 변학도면 큰 의미가 없다는 말씀이 상당히 재치있고 재밌습니다 하하 감사합니다!