쪽팔리면 질문하지 맙시다. 소중한 답변 댓글을 삭제하는건 부끄러운 일 입니다
안녕하세요! 인프라 경력 2년차 상큼한 신삥입니다.
다름이 아니라, 취미로 중학생때부터 서버를 구축해서 집에서 사용하고 있습니다.
mdadm 등으로 레이드도 하고... 어찌어찌 잘 사용하고 있었는데, 최근에 HDD 가 하나 죽었어요. 그걸 보고 하드디스크 LED 인디케이터가 있으면 좋겠다 싶어, Dell R740xd 한 대를 구매해서 돌리고 있어요.
그런데 이게... 제 입장에선 참 과분한 하드웨어입니다. 집에서 돌리는 거다 보니까 전력 소모를 최대한 줄이고 싶은데, 아무래도 제온 스케일러블 프로세서로는 좀 한계가 있지요.
해서, 몇 가지 질문을 드리고 싶어 여기에 글을 씁니다. 두서 없는 글 죄송합니다 ㅠㅠ
1. 델이나 HP, 기타 제조사의 LED 인디케이터가 주황색으로 점등되는 것은 PERC 나 HP smart array 등이 컨트롤해주는 것인가요?
1.1. 만약 그렇다면, 해당 레이드 카드가 하드디스크 사망을 판정하는 기준이 궁금합니다. SMART 값을 읽는 것인지, 해당 디스크의 I/O 가 에러를 내면 그것으로 파악하는지...
2. 따로 개인이 조립해서 쓸 수 있는 HDD 인클로저 달린 HDD rack / 컴퓨터 case 등이 있을까요? 사실 랙이 아니어도 크게 상관은 없습니다.
감사합니다!
시스템 보드인지 컨트롤러인지는 잘 모르겠습니다
다만 하드웨어 의존인건 확정입니다
1-1. 기본 SMART라고 생각해주세요
2. 저런 기능을 바란다면 없을꺼에요
리눅스라면 서버 관리용 소프트를 설치해서 매일 정기 보고서를 메일로 보내게하거나, 스마트값을 메일로 보내게 cron에 추가하세요
1.1. 기본 SMART 가 디스크 사망을 감지하는 매커니즘에 대해 혹시 알고 계신지요? 예를 들어 치명적인 특정 값 (187 Reported_Uncorrect 을 포함한 여러 값들) 이 급증했다던가 하는 식으로요.
2. ㅠㅠ... 감사합니다.
일단... 현재로서는 스크립트를 돌려서 본딩 상태 / SFP+ 광량 / 디스크 스마트 값 체크 (현재로서는 5, 7, 9, 187, 195~199) / 레이드 상태 체크 (mdadm) 등을 해서 motd 에 써주는 스크립트를 3일 단위로 크론탭 돌려놓았습니다. R740xd 로 완전히 마이그레이션이 끝나면 그 때 또 스크립트를 수정해야겠지요.
벤더 서버에서는 사용자가 거기까지 알 필요가 없기에 레이드 카드 메뉴얼이나 보드메뉴얼에는 설명이 잘 안되어 있습니다..
조립서버 (슈퍼마이크로 등)의 보드 /샤시 /백플레인 메뉴얼을 참조해야 합니다.. 그런데 여기도 모든 것을 설명하지는 않습니다..
단 샤시의 랜포트 LED 옆에 있는 디스크 억세스 LED (HDD LED) 는 보통 마더보드에서 나옵니다..
2. HDD의 이상 유무는 보통 HDD에서 SMART 값을 읽어 판단합니다..
중요한 것은 예비 섹터와 불량섹터의 치환 갯수 그 외 데이터 전송시 에러갯수 같은 것입니다..
그 외 디스크가 완전히 고장나서 플래터가 안돌아갔을 정도의 문제가 발생하면(HDD인식이 안되면) SMART 값과는 관련 없이 따로 체크할 겁니다..
동작하는 HDD는 놓고 이게 불량으로 판단해야 하나 아니면 그냥 사용해야 하나의 기준은 딱 정해진 것은 없다라고 생각하고
레이드 카드 제조사마다 그 기준은 틀리다고 보고 보통 그런 자료는 자기네만의 비밀자료이기에 대놓고 공개하지는 않을 것입니다..
대략 HDD가 계속 동작하면서 레이드 카드는 HDD는 주기적으로 SMART 값을 읽어 모니터링하게 되고 거기서 불량섹터가 발생하는데
HDD의 예비섹터로 곧바로 치환되고 섹터 안의 데이터 복구가 곧바로 된다면 레이드 카드는 그 HDD를 정상으로 볼 것이고 HDD안에 있는
갯수가 한정된 예비섹터를 다 사용하고 배드 섹터가 실제로 검출되어 데이터가 망싱되기 시작하는 시점에서는 레이드카드가 그 HDD는 불량으로
판단할 것입니다.. 그리고 그 불량 섹터가 발생을 해도 레이드 카드는 그 HDD를 레이드 카드에서 강제적으로 신호차단을 하여 리무브 하지는 않고
불량 HDD 라고 레이드 카드에 에러로그와 불량 HDD LED를 킬 것입니다.. 더 시간이 흘러서 불량 섹더가 더 많아지면 몃개 까지가 기준이 될지 모르지만
몇% 이상되면 레이드 카드는 그 HDD를 강제로 리무브 하겠죠..
(레이드 카드에 따라 리무브 안할수도 있습니다.. 레이드 볼륨의 HDD라면 레이드 볼륨은 디그레이드 될 것입니다..)
3. 본인이 레이드 카드나 핫스압 백플레인 관련 개발자(소프트웨어 +하드웨어) 라면 그런 기준 같은 것은 알 수 있을겁니다..
그러나 사용자로서는 그런 자료는 보통 볼 수가 없습니다..
만일 제조사 엔지니어와 직접 연결할 수 있는 방법이 있다면 거기에 관해 문의해보면 몬가 가르쳐 줄 지도 모릅니다..
핫스압 디스크가 나타난게 거의 30여년이 넘은 것 같은데 (SCSI HDD 부터 대략 펜티엄 프로 이전 프로세서 서버부터 라고 보시면 될 듯)
초기의 핫스압 디스크 LED는 직접 레이드 콘트롤러나 HBA에서 LED 신호선이 연결되었습니다..
그러다가 SATA 나오고 SAS 나오고 나서 MiniSAS 커넥터쪽에 SGPIO라는 프로토콜이 생겼는데 이것이 HDD LED 들을 모두 콘트롤하고
HDD IN/OUT, FAIL 백플레인 온도까지 체크합니다.. 그전에는 I2C가 사용되었던듯 합니다..
대략 3G~6G SAS RAID 콘트롤러에는 SGPIO /I2C 선택 메뉴가 레이드 콘트롤러안에 있고 카드 안에 직접 LED를 연결하는 연결 단자가 있습니다..
(리테일 레이드 카드인 Adaptec 5씨리즈 이상 , 아레카 SATA /SAS 레이드 카드 모델 설치 및 셋팅 메뉴얼 보시면 설명되어 있을 겁니다..)
그리고 지금도 SGPIO는 사용중입니다..
레이드 카드에 맞추어 백플레인쪽도 백플레인 콘트롤러 칩셋이 있는데 제품으로되어 있는 것은 AMI 것이 있고 그 외는 보통 FPGA 칩셋을 사용
펌웨어를 직접 개발하여 사용합니다..
https://www.ami.com/backplane-controller/
슈퍼마이크로 핫스압 백플레인이 대표적으로 AMI 백플레인 콘트롤러 칩셋을 사용합니다..
개인적으로 그런 류의 제품을 구하신다면 슈퍼마이크로 핫스압 백플레인이 달린 제품을 구해 사용해보시면 될 듯합니다..
스토리지 서버는 1~4U 까지 SAS 3~12G 까지 제품군이 있습니다.. 단 국내에서는 슈마 제품 선택을 하더라도 아마 원하시는 만큼 직접 구매는 힘들 수 있습니다..
먼저 슈마 백플레인과 샤시 메뉴얼을 받아서 공부해보시기 바랍니다..
https://www.youtube.com/@ArtofServer
이 유튜브에 스토리지 서버쪽의 백플레인 레이드 콘트롤러 등이 슈퍼마이크로와 델서버 중심으로 잘 설명되어 있습니다..
레이드 카드에서 시장의 비중은 LSI가 8~90% 급이고 그 외 Adaptec (Microsemi) 정도입니다..
LSI의 비지니스는 OEM을 주로 하기에 일반 개인이 구할수 있는 것은 중고 OEM 제품이 대부분을 차지합니다..