SAS SSD 추천 좀 부탁 드립니다.
https://www.newegg.com/samsung-pm1643a-7-68tb/p/2U3-0005-000H9?Descri… (1178)https://www.newegg.com/western-digital-ultrastar-dc-ss530-6-4tb/p/N82… (1044)
용도는 DB 격납 용이고 size 는 현재 7.8TB, 향후 최대 16TB 까지 늘어날 예정입니다.
현재 DB 는 Adaptec 71605 의 RAID 5 로 4TB HSS x 4 개에 넣어져 있습니다.
한 2년 전에 이 곳 장터에서 HGST SAS SSD 를 구입하여 Adaptec HBA 1000-8i (12Gbps) 에 믈려서 사용하여 보았는데,
2.5" SSD 속도 500 MBs 보다 약간 빠른 6~700 MBs 속도만 나와서 너무 실망한 뒤로 더 이상 SAS SSD 는 쳐다 보지도 않고 있었습니다.
요즘 시대가 많이 바뀌었으니 훨씬 더 좋은 상품이 많이 나왔으리라고 생각됩니다.
혹시 사용하여 보신 경험이 있으신 분 추천 바랍니다.
제가 웹 서핑으로 찾아본 것은 대충 이런 정도 입니다.
Samsung PM1643a 7.68TB SAS 12Gb/s 2.5" SSD (MZ-ILT7T6B) $1,119
Seagate Nytro 3032 6.40 TB SAS 12Gb/s SSD (XS6400LE70084) $1,440
WD Ultrastar DC SS530 2.5" 6.4TB SAS 12Gb/s (0B40368) $1,200
그리고, Dual-port SAS 12.0 Gbps interface 란 무었입니까?
두 개의 port 에 모두 접속하여 속도를 24 Gbps 까지 쓸 수 있다는 의미 일까요?
그리고 SAS SSD 를 RAID 5로 하면 어떤 점이 문제 일까요? 많이 추천되고 있는 RAID10 로 묶으면 어떤 점이 매리트로 작용할 까요?
그도 저도 아니면 그냥 15 TB (거의 $3,000 호가) 같이 큰 것 하나에 넣어 두는 것은 어떨까요?
답변하여 주시는 분에게 미리 감사 말씀 드립니다.
현재 DB의 속도가 문제라면 DB를 튜닝하는게 더 효율적이라고 생각합다만,..
상식적으로 입출력속도가 중요하고 대용량이 필요하다면 별도의 스토리지를 쓰는 게 좋다고 생각합니다.
Dual-port SAS 12.0 Gbps interface 라는 의미는
SAS 12G interface 라는 의미이고,
Dual port 니까 이 포트가 2개짜리라는 겁니다.
RAID 5라는 것은 하나의 패리티를 사용하는 것인데..
디스크 장애시 복구때 복구가 안되는 경우가 종종있고,
RAID 5는 장애 복구시 rebuild 시에 엄청나게 많은 시간이 소요됩니다.
RAID5는 캐쉬메모리가 없는 RAID카드에서는 절대적으로 구성하면 득보다 실이 많습니다.
RAID10으로 묶으면 미러에 의해서 손해보는 Disk가 많은대신에 속도가 빠르지요.
10 정도는 캐쉬메모리가 없는 SW raid 에서도 꽤 빠르게 안정적으로 동작합니다.
기본적으로 Raid 0가 아닌이상 현실적으로 디스크 1개의 쓰기속도를 넘기는 힘든게 현실입니다.
따라서 엔터프라이즈 환경에서는 50,60을 그룹으로 나눠서 구성하는 경우가 많습니다.
제가 Mainframe 시절 Oracle DBA 를 하였고, Tunning 을 해봐서 말씀하시는 뜻은 잘 알고 있습니다.
포트가 2개 짜리라면 현실적으로 컴퓨터 한대에 2개 포트 모두 접속합니까? 아니면 어떤 용도로 쓰는지를 알고 싶어서요...
저는 엔터프라이즈 환경은 아니니까 RAID10 를 써야 겠습니다.
만약 quad port 라면 16개까지 붙을 꺼구요.
그리고 SSD는 소프트레이드계열을 써야지 하드웨어 레이드는 특성탑니다.
델스토리지들 대부분 10 으로 구성합니다.
경제적인 문제로... 잠시 RAID 5 를 째려봤습니다.
최소 4개는 구입해서 RAID10 으로 쓰는 것으로 방향을 잡겠습니다.
https://www.snia.org/sites/default/files/HarryMasonCzekalski_SAS_The_Emerging_Storage_Fabric.pdf
SAS Dual 포트에 대해서는 위 링크를 보시면 대략 이해가 가능하실 것입니다..
(거의 10여년전 자료도 있어서 지금 와서 없어진 것도 있습니다..)
https://demartek.principledtechnologies.com/Demartek_Interface_Comparison.html
SAS Port B 가 두번째 SAS 데이터 포트입니다..
https://www.supermicro.com/en/products/chassis/4u/847/sc847be2c-r1k23lpb
https://www.supermicro.com/en/products/chassis/4u/847/sc847be1c4-r1k23lpb4
대략 이 두가지 모델의 같은 케이스에 들어간 다른 백플레인의 차이를 이해하면 됩니다..
백플레인의 메뉴얼을 확인하세요..
12G SAS 를 사용하려면 백플레인/케이블/HBA 모두 12G로 구축해야 합니다..
6G SAS 에서 아예 인식을 안할 수도 있고 6G SAS 로도 동작할 수 있습니다..
같은 갯수의 디스크(SSD든 HDD든) 로 각각의 레이드 볼륨을 같은 스트라이프 사이즈로 구성한 뒤
정상 동작일때 각 레이드 레벨 볼륨의 퍼포먼스를 비교해보시고
디스크가 하나 고장났을때 (디그레이드 시) 각 레이드 레벨 볼륨의 퍼포먼스를 비교해보시고
디그레이드에서 새 디스크를 넣어서 복구할 때 각 레이드 레벨 볼륨 복구 시간을 비교하셔서 어느 것이 장단점이 있는지 따져 보면 됩니다..
RAID 10 과 RAID 5 구성에서 가장 중요한 차이점은 RAID 5는 페리티 계산을 넣어서 레이드 볼륨을 구성한다는 것입니다..
dual port를 지원하는 백플레인에 물려야 그 성능이 나옵니다. 예를 들어 인텔 8bay 짜리를 보면 8bay인데 뒤에 sff-8643 4port가 달려 있습니다. 일반 싱글 포트용은 sff-8643 2port가 8bay를 담당하죠.
듀얼포트 백플레인 외에 그냥 sff-8643으로부터 ssd에 직접 염결하는 듀얼포트를 지원하는 케이블도 있는데, 값이 매우 비쌉니다. micro sata cable인가애서 나오는 케이블
raid 5는 hdd도 마찬가지이지만 순차 읽기 쓰기는 성능이 좋은데, 랜덤 쓰기 성능이 좋지 않습니다. 2tb 이상의 일반용 hdd를 사용하면서 raid 5를 쓰는 것은 리빌딩시 조질 염려가 크기 때문에 모두들 말리고 있죠. 기업용 ssd의 경우에는 그런 염려는 거의 없습니다. UBER 10^-17으로 일반 hdd에 비해 ure 발생 가능성이 1/1000 수준이고 용량도 작기 때문입니다.
SSD raid는 raid 카드보다 hba에 물려 소프트웨어 raid로 구성하는 것이 제일 좋습니다. raid 10
듀얼포트 백플레인이 있어야 제 성능을 발휘하는 군요.
또하나 더 배웠습니다. SSD 는 HBA 에 물려서 S/W RAID10 로 쓴다는 것...
제가 Adaptec HBA 1000-8i 를 가지고 있으니, 딱 좋군요.
다시한번 더 감사드립니다.
일반적인 작업에는 큰 영향 없지만 부하가 걸리고 고성능을 요구하는 작업에 걸리면 한서버에서 돌아가는건 오히려 역효과가 납니다.
스토리지를 TrueNAS를 만들어서 붙이던가 하세요. 장터에 메모리값도 저렴한데 그거 256G만 캐쉬빨에 넣어도 엄청 빨라집니다.
대기업 메뉴얼 가이드에도 DB서버는 외장스토리지 사용을 해야한다는게 가이드입니다. 10년전에는 레이드콘트롤러도 좋은거고 인터널 이빠이 붙이면 되는데 왜 구지 스토리지까지 했을까? 의구심이 들었는데 막상 써보니 다 이유가 있었습니다.
가상화도 마찬가지입니다. 인터널 레이드에 때려박은거 보다 외장디스크로 연결한게 훨씬 안정적이고 부하가 걸려도 느려짐도 없었습니다.
몇년전에 MS기술지원 하는 담당이 있었는데 그분도 절대 인터널디스크로 DB서버 만들지 말아라 경고 하더라구요. 그래도 뭐 차이 있겠어? 이런생각 했는데 막상 대용량 작업하거나 점유율 많이 먹는 작업 돌리면 이서버가 이성능밖에 안나오는거였나? 하는 착각을 불러옵니다.
마침 요사이 TrueNAS 도 테스트하고 있으니, 그 쪽에다 한번 넣어 보겠습니다.
가지고 있는 Optane 으로 SLOG 도 써보고... 사실 Mongo DB Write 시에도 그런 LOG 가 필요합니다.
SAS SSD 는 제가 가지고 있는게 없어서, M.2 SSD 로 한번 해보렵니다.
원래 TrueNAS 목적은 Backup 이었는데, 임시로 DB Stroage Server 도 한번 해보죠 뭐...
좋은 SSD로 추천할 만한 것으로는 SS300 중에서 HUSMM32xx입니다. MLC 제품으로 순차 읽기 쓰기 2200MB/sec 남짓 나오고, random read 400kiops write 200kiops. 10dwpd. 웬만한 기업용 NVMe U.2보다 낫습니다. 물론 요즘 나오는 기업용 U.2들 중에는 이보다 훨씬 높은 성능을 보이는 것들도 있지만 지금 나오는 것들 중에도 이보다 못한 것이 많습니다. 대단히 만족하며 사용하고 있습니다.
SS300 중에서 HUSMR32xx는 HUSMM32xx보다 성능이 좀 떨어지고 3dwpd인 제품인데 이것도 좋습니다.
TLC로는 SS530 중에서 WUSTM32xx가 있는데, spec 상 성능으로는 HUSMM32xx를 능가합니다. 대단한 놈입니다. 10 dwpd
WUSTR64xx도 좋습니다. 3dwpd
SS540은 SS530과 비슷한데, 오히려 SS530보다 좀 못한 것 같습니다. 나중에 나온 NAND들이 공정이 미세화되면서 용량은 늘었지만 내구성 등은 떨어집니다.
좋은 기업용 SSD들은 새로 나오는 미세공정 NAND들을 사용하지 않고 전에 나온 품질이 우수한 NAND들을 사용합니다. 미세공정으로 용량이 커진 NAND들은 일반용 SSD들이 먼저 사용하죠. 후에 그중에서 쓸만한 것들을 골라 기업용에서 사용.
HGST에 이어 SAS SSD 좋은 것은 Toshiba 제품들
PX02Sxxxx로부터 PX03 PX04 PX05를 거치다가 Kioxia PM5, PM6로 넘어갑니다. PM6는 24g SAS 제품
PM5 다음에 M자 붙은 것이 V자나 R자 들어간 것보다 좋습니다.
삼성 것으로는 PM16xx가 SAS 제품인데, spec으로 보나 review로 보나 썩 좋지는 않은 것 같습니다. HGST나 Toshiba(Kioxia)는 사용해 오고 있는데, 둘 다 좋습니다.
SAS SSD들이 NVMe SSD들보다 비싼 편.
간장게장 님, 감사드립니다.
WD Ultrastar® DC SS300
https://documents.westerndigital.com/content/dam/doc-library/en_us/assets/public/western-digital/product/data-center-drives/ultrastar-ssd-sas-series/data-sheet-part-numbers-ultrastar-dc-ss300.pdf
WD Ultrastar® DC SS530
https://documents.westerndigital.com/content/dam/doc-library/en_us/assets/public/western-digital/product/data-center-drives/ultrastar-ssd-sas-series/data-sheet-part-numbers-ultrastar-dc-ss530.pdf
WD Ultrastar® DC SS540
https://documents.westerndigital.com/content/dam/doc-library/en_us/assets/public/western-digital/product/data-center-drives/ultrastar-ssd-sas-series/data-sheet-part-numbers-ultrastar-dc-ss540.pdf
다른 회원님 들도 참고가 되실까 하여 요약된 Part Number Selector Table 이 들어있는 URL 을 올려 놓습니다.
그런데, 이런 SAS SSD 를 붙이려면, 대개 어떤 controller (HBA, RAID) 를 쓰는 것이 좋을까요?
LSI와 Adapatec
전체 SAS콘트롤러 시장에서 아마 LSI 가 차지하는 비율이 10중 8~9정도로 생각하시면 됩니다..
그리고 LSI는 본래 이쪽 비지니스에서 OEM 중심입니다.. Adaptec 은 그 반대로 리테일 중심입니다..
우선 LSI로 제품을 확인하시고 그 다음 Adaptec 을 보시면 됩니다..
LSI 제품은 똑같이 생긴 제품이라도 어디에 OEM하였느냐에 따라 내부는 많이 달라집니다..
재일 심한 것은 그 OEM된 회사의 몇몇 제품에서만 동작하는 경우입니다..
(이 락을 푸는 방법도 없고 실제 제품 구해 꼽아보면 카드에 전기도 안들어갑니다..)
LSI 리테일 제품을 구입하여야 겠군요.