지존컴퓨터 2023-04

12테라 ~ 14테라 하드드라이브 사용예정인데 너무 용량이크면 인식이 안되는경우도있나요?

박문형 2023-04

그 크기면 6G SAS 콘트롤러에서 무리일 수 있습니다..

개인적으로 생각하기에는 10TB 까지입니다..

https://www.broadcom.com/support/storage/interop-compatibility

여기서 6G Host BUS Adapter 재일 밑에 6G SATA/SAS 콘트롤로 호환표를 확인하세요..

지존컴퓨터 2023-04

문형님 제가 검색좀해보고 아래 댓글주신분도 계시고해서 궁금한부분이 생겼는데요.

6Gb SAS컨트롤러에 10TB이상의 하드드라이브는 무리일수있다. 라는점이 혹시 어떤부분에서 무리일수있다 라는의미인가요?

예를들면 10TB가 넘는 드라이브를 8개 연결했을경우 이러한 문제가있을수있다 라는식의 어떤문제가 생길가능성이 있는지

혹시 알고계시면 댓글주시면 감사하겠습니다.

// 댓글후에 계속 검색을해보니까 6Gb와 12Gb가 대역폭 차이인것같은데 속도가 약간 안나올수도있는것외에 인식이나 사용자체에는

// 별 문제가없나싶은데 혹시 어떤점에서 다른건지 알수있을까요? 실사용시에 문제가될수있다 싶은부분이 궁금합니다.

박문형 2023-04

호환성 자료표에 보시면 10TB 이상 하드는 호환성이 검증되어 있지 않습니다..

제조사에서 나온 것이고 보통 제품 처음 출시할때 나온 것이지만 어느 정도 공식적인 자료이지요..

현재 하드는 22TB 까지 나와 있지만 대용량 하드의 문제점중에 하나는 인터페이스의 대역폭이 용량에 비해 적기에

하드 전체 용량의 데이터가 들락날락하는데 시간이 많이 걸린다는 것입니다..

그래서 가능한한 대역폭이 넓은 인터페이스로 연결하는게 대용량 디스크에 조금이나마 유리합니다..

그리고 SAS 6G 는 나온지가 거의 10년이 넘어가고 있고 현재는 제품들이 다 단종에다가 기술지원도 중단된 상태로 봐야 합니다..

새로 나온 하드들을 재대로 지원할 지는 실제 사용해서 검증해봐야 하기에 쉬운 문제가 아닙니다..


만일 문제가 생긴다면 이런 것이겠죠..

SAS 카드는 용량을 다 인식하는데 실제 데이터를 끝까지 채워 보니 끝까지 채워지지 않더라 데이터가 유실되더라

근데 이런 것은 실제 당해보지 않으면 모릅니다..

그리고 SAS 6G에 고용량 하드들도 잘 사용하는 경우도 있고요..


그리고 저 호환 자료에서 SAS 12G는 아마 14TB 인가 18TB 까지 호환성 테스트 되었다고 나와 있을텐데

그래도 SAS12G 는 계속 제조사에서 문제가 생기면 바이오스 /펌웨어 /드라이버들이 업데이트 되고 기술지원이 되고 있습니다..

박문형 2023-04

DELL H200은 LSI SAS2008 칩셋을 OEM 받아 DELL에서 제작된 카드입니다..

https://www.servethehome.com/lsi-sas-2008-raid-controller-hba-information/

LSI SAS 2008 chipset base 카드들의 리스트입니다..

MiniSAS 커넥터가 카드당 2개 이기에 카드당 8개까지 SATA /SAS HDD를 카드와 직결하여 연결할 수 있습니다..

헤놀에서는 보통 IT 모드 펌웨어로 업데이트 해서 사용합니다..

헤놀7.1.1과의 호환성은 잘 모르겠네요..

dateno1 2023-04

6/7대 호환성은 확인했습니다

송진홍 2023-04

헤놀 7.1 에서 H200 SAS카드 잘 작동하는 걸로 알고 있습니다.
헤놀(부트로더) 발전에 많은 기여를 하고 계시는
화정큐삼 님께서 잘 사용하고 계시는 걸로 알고 있네요..^^
다만.. 사용하시려는 메인보드에서 H200 카드 2개의
옵션롬 호환성(동작)여부에 대한 확인이 필요합니다..

스캔l민현기 2023-04

H200, H310 둘 다 헤놀 7.1.1 U5에서 사용중입니다. 펌은 IT펌입니다.

죠슈아 2023-04

DELL H200가 동작하지만 ..  최대 8개 디스크 장착 가능 합니다.
하지만 디스크 가격과 비교해서 너무 오래된 초저가 SAS카드를 하는 것은 밸런스가 맞지 않습니다.

최신 디스크 4K 섹터 포맷 지원 여부에 따라서 추가할 디스크 선택의 범위가 제한 될 수도 있습니다.
DELL H200가 4K 섹터 포맷 이전 제품이기 때문에 512e 까지는 지원될 수도 있지만
4K 네이티브 지원 디스크 지원과 12Gbps 디스크 사용이 제한되면  NAS 성능 저하를 피할 수는 없겠죠.

최근에 아래 링크를 구입 했는데요.
https://www.ebay.com/itm/385431860201
SAS Lane Cap 하나 또는 2개가 떨어진 것을 판매하는데 열풍기로 붙였더니 16 포트 모두 사용 가능 .. 
사용하지 않는 SAS 카드에서 Cap을  떼어내서 붙이는데 .... 30분 노력 투자  ..  실패해도 12~14포트는 동작하므로  ...
그런데 .. 한국엔 배송을 하지 않는군요 .... ㅠㅠ

https://www.ebay.com/itm/284879458062?
한국에 배송하는 이걸 추천 합니다.
PCIE x8  슬롯 하나로 16개 HDD까지 가능 합니다.

지존컴퓨터 2023-04

조슈아님 처음주신링크들어가보니까 smd저항 작은거 두개가 떨어진것같아보이는데 이정도는 저도 수리할수있는데

smd저항 두개만 연결해주면 이상없이 사용가능할까요? 아니면 말씀하신것처럼 수리안하고 그냥써도될라는지...

가격이 좋네요. 배송대행쓰면 한 5만원이면 해결될것같아보이고요. DSM 7.1사용중이신가요?

죠슈아 2023-04

smd cap 입니다. smd저항 으로하면 않됩니다.
저는 고장난 6G, 3G SAS HBA 에서 떼어내서 사용 했습니다. 
고정이 완료되면 액체로 된 본드를 살짝 덮어서 두면 딱딱하게 굳어요.
12Gbps 신호가 통과 해야 하므로 cap 용량이 작기 때문에 아주 작습니다.
이걸 구할 수 있으면 떨어진 위치에 올려놓고 .. 핀셋으로도 어렵구요.
대충 올려놓고 바늘로 조금씩 움직여서 스마트폰 사진 모드로 확대해 보면서 천천히 ... 자리 잡으면
열풍기를 바람 세기는 약하게 온도는 420도로 멀리서 천천히 접근하다 보면 Cap이 달라 붙어요.
납땜 인두를 사용할 수 없어요. 인두 팁에 달라 붙어서 PCB 쪽에 남아 있지 않습니다.
주의할 점은 수직으로 하지 않으면 이 cap이 날라가 버리기 때문에 .. 날라가면 못찾습니다. ㅎㅎㅎ  거의 먼지 수준으로 작아요.

수리 안하고 그냥 사용하면 16개 포트중 해당 포트만 디스크 인식이 되지 않습니다.
이 cap을 붙이면 ..  PCB 상에서 라인을 따라가면 납땜된 곳이 반드시 하나씩 있습니다.
이 납땜된 곳과 붙인 Cap의 한쪽과 도통 테스트하면 납땜이 잘된 것인지 알 수 있습니다.
cap에 납아있는 납과 PCB 패드에 남아 있는 납을 녹여서 붙이게 됩니다.
액체 납을 아주 조금 묻혀서 열풍기로 녹여서 붙이는 시도를 했지만 액체납이 녹을때 Cap이 움직이므로 다시 위치 잡아서 다시 열풍기로 붙이면 됩니다.
 
열풍기가 없으면 어렵습니다. 
Cap 대신 smd Registor 로 하면 않됩니다.
아무 용량의 Cap으로 하면 신호 대역폭이 12Gbps에 도달하지 않게 됩니다. 
이 파트를 구입하게 되면 해당 위치에 살짝 붙어 남아있는 cap을 떼어 버리지 말고 잘 ~~ 움직여서 다시 붙여야 합니다.
붙이기 전에 PCB 오픈 패드에 납을 미리 발라서 녹여 놓아야 합니다.

이걸 사용해서 DSM 7.1 설치해서 사용중이며 16개 HDD  사용 합니다.

그리고 5만원이면 해결이 아닙니다....  HD SAS to SATA 케이블 4개 또는 HD SAS to 8087 미니 SAS 케이블 4개 가격을 포함 해야 합니다 .
4개 케이블 가격이 이 SAS HBA 가격보다 훨씬 더 들게 됩니다.  ㅠㅠ

지존컴퓨터 2023-04

아 완전히 떨어진것만아니면 수리는 문제가없을것같습니다. 제 친구가 PCB회로 수리하거나 하는일해서 부탁할 생각입니다.

저는 아예없는줄알았어요. 케이블도 비싸군요. 일단 알리쪽에 NVME to PCI-E 어뎁터를 주문했습니다. 이제 카드랑 케이블만 선택해서 주문하면되는데

모르는게 많네요. 케이블도 한번 알아봐야겠습니다. 감사합니다.

박문형 2023-04

저 신호선에 들어가는 케페시터 (콘덴서)는 용량/스팩/모델이 똑같아야 됩니다..

아무것도 안 써 있으니까 이상없는 것 용량 확인해서 구해야 하는데 아마 낱개로는 안팔겁니다..

가로 세로가 대략 1mm 급(1mm도 안되는 듯) 의 부품입니다..

그리고 신호선은 케페시터를 거쳐서 양쪽이 도통해야 됩니다..

케페시터가 떨어지면 신호선이 끊어진 상태가 됩니다..


스토리지 장비에서 어찌 보면 재일 골치 아픈 부품이 케이블입니다..

저는 될 수 있는한 비싸도 레이드 카드 제조사에서 나오는 케이블을 사용하려고 노력합니다..

죠슈아 2023-04

알리에서 NVME to PCI-E 어뎁터는 90cc 스쿠터 엔진을 8인승 RV에 장착하는 겁니다.
굴러는 가는데 속도가 엄청 날거예요.
SATA2 속도가 나올 겁니다.
여기에 장착된 디스크들을 RAID6 로 볼륨을 만들면 평소에도 읽기 속도는 반토막 날거구
리빌드를 해야 하는 상황이 되면 시간이 얼마나 걸릴지 ,... ㅎㅎ

PCIE SATA multiplexing 방식의 칩셋에 발열이 심할테니 냉각 잘하지 않으면 칩셋이 못 버티고 데이터 오염이 발생됩니다.
레이드 볼륨 리빌딩이 엉망이 되서 데이터를 날리게 될 수 있습니다.
스위칭 방식의 SATA 포트 확장에 디스크 데이터 날린 경험 때문에 .. 저런 식의 확장 방식은 극혐 이라서 ...
벤더의 SAS 확장 디스크를 달고 있는 서버의 디스크로 생성한 볼륨에는  느리고 .. 느려서 과제 작업용 데이터는 저장 하지 않습니다.
시스템 관리상 데이터 백업에 잠시 보관 용도로 사용 하기는 하죠.

지존컴퓨터 2023-04

음.... NVME to PCI-E 젠더는 아무리봐도 회로기판..이라기보다는 그냥 슬롯형태만 바꿔주는 젠더같아보이는데요..?

그리고 보드의 NVME포트대역폭은 32G인데 대역폭이 부족할것같지는않아보이는데, 읽기속도가 반토막난다는건 왜 그러는건지요?

NVME => PCI-E => SAS RAID구성... 괜찮아보이는데.. 속도가 안나올이유가 딱히 없어보이는데요?

https://ko.aliexpress.com/item/1005005457613885.html?spm=a2g0o.productlist.main.21.29705dbdfXZVV6&algo_pvid=fe461d99-ccd4-4791-857a-3c3dc90eab9a&algo_exp_id=fe461d99-ccd4-4791-857a-3c3dc90eab9a-10&pdp_npi=3%40dis%21KRW%2145296.0%2145296.0%21%21%21%21%21%40212243c016822232989897306d06cc%2112000033160005433%21sea%21KR%210&curPageLogUid=7ppaBcjQd7MT

위 링크가 제가 구입한 제품이고요. R43MR을 구입했습니다. 아무리봐도 그냥 슬롯형태만 바꿔주는거고 중간에 뭐가없어보여서

사실상 그냥 NVME 32g 대역폭 슬롯에 직결하는거랑 차이가없어보이는데요. 속도가 느려질 이유가 뭐가있을까요?

죠슈아 2023-04

NVME to PCI-E 어뎁터 ...
노안이 문제 입니다. ㅎㅎㅎ
NVME to 6 port SATA  구입해서 디스크 확장 글을 읽다가 ... NVME to PCI-E 어뎁터 를 NVME to 6 port SATA로  잘못 읽었네요.

하지만 NVME 는 PCIE x4 이고 HBA는 PCIE x8 이므로 대역폭이 1/2 는 될 겁니다.

김장우 2023-04

x10sl7-f 보드의 내장 RAID가 6G LSI2008입니다.
방금 DS3622xs+올렸습니다.
18TB 8개 장착해서 RAID-6로 묶어서 brtfs로 약 100TB 초기화 중입니다.
이 자리를 빌어 화정큐삼님께 감사의 마음을 전합니다.
추가 Emulex 10Gb 네트웍도  뻘짓없이 한방에 잡았습니다.
USB-DOM을 사용했는데.. 어쩔 수없는 건지는 몰라도 Disk1은 빈칸이 되는게 좀.. 아쉬었습니다.

2008 최대 사이즈 :  2TB 이상  : https://www.intel.com/content/www/us/en/support/articles/000007454/server-products.html
H200 : 6GB 전용 expender 사용 시 최대 16개 디스크 사용가능 : https://www.dell.com/support/kbdoc/en-my/000134280/perc-dell-perc-h200-and-6gbps-sas-hba-features
H310 : none-RAID로 최대 32개  디스크 사용가능 : https://i.dell.com/sites/doccontent/shared-content/data-sheets/Documents/dell-perc-h310-spec-sheet.pdf

박문형 2023-04

저보고 6G SAS HBA 콘트롤러를 선택하라고 하면 저는 LSI 오리지날 제품을 선택합니다..

그게 그나마 지원하는 바이오스나 펌웨어를 구하기 쉽기 때문이고 일종의 표준이기 때문입니다..

LSI 9211-8i SAS 6G card가 장터에 보면 저렴한 가격에 나와 있습니다..

SAS 12G 카드를 국내에서 구하기는 물건이 귀하고 가격도 만만하지 않은데

옛날에 웹하드가 전성했을 시기(약 15~10여년전)에 하드와 스토리지 서버가 엄청나게 사용되었고 그 때 SAS 3G 에서 시작해서 SAS 6G 때 끝났습니다..

그 때 사용되어 중고가 된 제품들이 중고시장에 물량으로 돌아댕기는 경우가 많았고 지금은 어느 정도 다 소진되었다고 볼 수도 있습니다..

그 다음 하드디스크를 기반으로 한 채굴 솔류션으로 SAS HBA카드가 많이 사용되었는데 그 때는 보통 SAS 6G 저렴한 제품이 많이 쓰였습니다..



그 외 한 시스템에 하드를 몇개나 설치할 지는 모르겠지만 하드를 많이 설치 할수록 파워 전원 구성과 하드에 연결되는 케이블 문제가 슬슬 대두되기 시작합니다..

하드가 10개 이상이 되면 핫스압베이로 구성된 재대로 된 스토리지 서버로 구축하는게 그나마 낫습니다..

그리고 하드가 많은 시스템은 하드 발열을 신경 써야 하기에 시스템이 어느 정도 시끄러울 수 밖에 없습니다..

지존컴퓨터 2023-04

일단 문형님 댓글 보면서 쭉 생각해봤는데 일단은...

6기가 대역폭이 문제될경우 = 전송데이터량이 6기가빗이 넘을경우 = 6기가빗 = 초당 750Mb/s

라고 계산을 하고... 최신 하드드라이브 12테라 부근 sata드라이브기준 최대속도가 250Mb/s근처니까

컨트롤러에 하드드라이브 3개연결까지는 거의 100% 안전하다.. 라고 생각하고 일단 저는 저렴하게 한번 세팅해보기로 마음먹었습니다.

장터에 파는 LSI 9211 6G제품 일단 구매해서 알리에 지금 주문해둔 NVME to PCI-E로 연결한번 해본다음 하드드라이브를 더 추가할

의향이 생기거나 더 확장하고싶은날이 오면 케이스교체+RAID카드교체+하드추가. 이정도로 가닥 잡았습니다.

일단 지금은 12테라 4개를 헤놀로 쓰고있고요. 케이스에 베이가 총 6개라서 나머지 2개를 더 채우고싶은데 SATA포트가 보드에 4개뿐이라

이리저리 알아보던게 여기까지왔네요. ㅋㅋㅋ

박문형 2023-04

https://www.youtube.com/watch?v=hTbKzQZk21w&t=26s

https://www.youtube.com/@ArtofServer

Art of Server 라는 유튜브 체널에 가시면 SAS 카드와 슈퍼마이크로 스토리지 샤시에 사용되는 백플레인 SAS Expander 에 대한 설명이 잘 되어 있습니다..