화정큐삼헤놀포럼에 러시아 분이 위 케이스로 TCRP 에 사용하시고
디스크가 사라져 보이고 로더가 다운된다고 하시네요.
9211-4i 에 12GB/s SAS 디스크 사용을 위해 9211-8i IT Mode 펌업을 해서 사용하는것이 일반적으로 검증된 방법인가요?
헤놀포럼에 러시아 분이 위 케이스로 TCRP 에 사용하시고
디스크가 사라져 보이고 로더가 다운된다고 하시네요.
9211-4i 에 12GB/s SAS 디스크 사용을 위해 9211-8i IT Mode 펌업을 해서 사용하는것이 일반적으로 검증된 방법인가요?
SAS2004 전용 펌웨어 필요...
일단 불안정해진것이 mpt3sas 드라이버 때문이라고 의심이 가는상황인데, 조금더 확인해 봐야 할것 같습니다.
답변 감사합니다.
원칙적으로 따지면 12G SAS HDD에는 12G SAS 콘트롤러를 사용하고 케이블도 12G 로 맞추어야 하지만
12G SAS 콘트롤러는 펌웨어 크로스 플래슁이나 펌웨어 올리는 것이 인터넷상에 보기가 힘들고
12G SAS 콘트롤러가 구하기도 좀 힘들고 가격도 만만치 않고 그렇습니다..
그 외 LSI 12G SAS 콘트롤러는 OEM 한 곳에 따라 펌웨어나 하드웨어 구조를 약간씩 바꾸어 놓아서 자기 것 아니면 벽돌되기 딱 좋습니다..
그에 비해 6G SAS 콘트롤러 때는 하드디스크가 많이 사용되었던 시기라 콘트롤러든 하드든 중고로 구하기가 쉽습니다..
펌웨어 올리는 것이나 바꾸는 것도 쉽고요..
그 외 6G SAS 콘트롤러를 사용한다고 12G SAS HDD가 문제가 퍽퍽 나오냐 그런 것도 아니고요..
6G SAS 콘트롤러와 12G SAS HDD는 제조사에서 보증할 만큼 테스트 한 것은 거의 보지를 못하였기에
일반적으로는 문제가 없다라고 할수는 있지만 가끔 모델에 따라 호환성 문제는 나타날 수 있다라고 생각합니다..
12G SAS HDD 테크니컬 스팩 보면 SAS 6G /3G 다 지원한다고는 나와 있습니다..
6GB/s 로 다운스펙해서 몇주동안 문제없이 잘 사용했다고 하네요.
mpt3sas 드라이버 문제가 아닐지 싶은데, 일단 더 확인해 봐야 할것 같습니다.
답변 감사합니다.
TCRP 설치하면서 테스트 할때는 정상 동작 하는 것 같더니
사용중에 자주 디스크가 사라지거나 오류 발생이 자주 발생 하고 있어서 최근에는 SAS HBA로 구성한 TCRP 시스템을 사용하지 못하고 있습니다.
디스크가 사라지거나 오류 라고 말하는 이유는 메뉴에서 Fix 를 선택하면 다시 정상 이라고 나타나고
리부팅해도 정상으로 나오기 때문 입니다.
이 상태로 몇 시간 지나면 다시 사라지는 증상이 나타납니다.
그래서 ...........
디스크가 오래된 것인지 의심 하고 있습니다.
새로 구입한 디스크에서도 동일 증상이 발생 하는지 확인 하려고 디스크를 구매 하려고 합니다.
사라지는 디스크를 떼어내서 윈도우 시스템 과 레드햇에 장착해서 일주일 이상 사용중 인데요.
디스크가 사라지는 증상은 나타나지 않습니다.
시놀로지 DSM이 smart 정보가 문제가 있으면 디스크가 불량 이라고 표시하면서 디스크가 사라지게 하는 것이 아닌가 라고 의심 하고 있습니다.
레드햇이나 윈도우에서는 SMART 정보가 디스크 Health가 낮아진다고 해서 디스크가 사라지게 하지는 않기 때문인가 ? 라는 생각이 듭니다.
아무튼 사라지는 디스크가 오래된 것이라서 발생 하는 것인지는 새로 구입한 디스크를 장착해서 비교하면 더 정확하게 결론을 낼수 있을 것 같습니다.
16개 디스크 중에서 사라지는 디스크 위치는 랜덤하고 이 디스크들의 SMART 정보를 window에서는 100% 으로 나오고 있습니다.
DSM이 SMART 정보를 가져오는 과정이 이슈가 있고 mpt3sas 드라이버가 원인이지 않을까 라고 의심 합니다.
HBA 칩셋이 카드 마다 다른데 DSM 드라이버는 mpt3sas 하나로 동작하더군요.
이건 좀 이상 합니다..... 하나로 통합된 드라이버가 모든 HBA 카드에 사용된다는 것이 찜찜하네요...
디스크를 16개를 신규 구입해야 하면 ... 비용이 너무 많이 들어서 ㅠㅠ ..... 쉽지 않군요.
디스크 하나 또는 둘 으로 수량이 적으면 디스크 사라짐 증상이 발생 하지 않기 때문에 16개 모두 바꿔야 ... ㅠㅠ
저는 HBA LSI9300-16i (SAS 3008 ) 사용하는 시스템에 LSI9207-8i x2 (SAS 2308) 으로 변경해서 테스트해보고 있습니다.
/* driver versioning info */
#define MPT3SAS_DRIVER_NAME "mpt3sas"
#define MPT3SAS_AUTHOR "Avago Technologies <MPT-FusionLinux.pdl@avagotech.com>"
#define MPT3SAS_DESCRIPTION "LSI MPT Fusion SAS 3.0 Device Driver"
#define MPT3SAS_DRIVER_VERSION "09.102.00.00"
/* mpt2sas driver versioning info */
#define MPT2SAS_DRIVER_NAME "mpt2sas"
#define MPT2SAS_DESCRIPTION "LSI MPT Fusion SAS 2.0 Device Driver"
#define MPT2SAS_DRIVER_VERSION "20.102.00.00"
이부분을 pocopico 님이 드라이버가 너무 오래되었다는 판단에 broadcom 의 최신버전인 아래 버전으로 드라이버를 교체했습니다.
/* mpt3sas driver versioning info */
#define MPT3SAS_DRIVER_NAME "mpt3sas"
#define MPT3SAS_AUTHOR "Broadcom Inc. <MPT-FusionLinux.pdl@broadcom.com>"
#define MPT3SAS_DESCRIPTION "LSI MPT Fusion SAS 3.0 & SAS 3.5 Device Driver"
#define MPT3SAS_DRIVER_VERSION "41.00.00.00"
/* mpt2sas driver versioning info */
#define MPT2SAS_DRIVER_NAME "mpt2sas"
#define MPT2SAS_DESCRIPTION "LSI MPT Fusion SAS 2.0 Device Driver"
#define MPT2SAS_DRIVER_VERSION "20.00.03.00"
지금와서 보니 이렇게 바뀌면서 mpt2sas 드라이버의 버전은 살짝 낮아졌네요.
지금 돌이켜보니 정말로 버전업이 맞는건지 모르겠습니다.
Avaco 와 Broadcom 은 버전 관리가 서로 다를테니까요.
어쨌던 당시엔 드라이버 컴파일 하실수 있는분은 pocopico 님이 유일해서 이렇게 따라가긴 했었습니다.
지금은 저도 드라이버를 컴파일 합니다.
저도 최근에 메인헤놀에 Dell Perc H200 을 장착하고 mpt3sas 의 안정성을 시험중입니다.
몇일전에는 SHR 로 사용중인 하드중 제일 싸구려에 신뢰가 가지 않는 마샬 4TB 하드가 하나 인식불가로 빠지면서 볼륨 성능저하가 발생했습니다.
다시 재인식 시켜서 볼륨을 재정렬하고 있는 상태이긴 합니다.
HBA 칩셋이 다르지만 mpt3sas 에 포함되는 디바이스는 분명 기준이 있습니다.
저도 드라이버 안정성에 대해 조금 의심을 품어보고 알아볼 수 있는 부분은 좀더 연구해 보겠습니다.
디스크 볼륨 사용량이 95% 넘어가고 있어서
디스크 사라짐 원인이 오래된 디스크가 원인 이라면 좋겠지만 ......
증상이 수상해서 메인 으로 사용하던 DSM6.X NAS를 DSM7.X 으로 옮기는 것을 미루고 있습니다.
41.00.00.00 에서 46.00.00.00 버전을 컴파일해서 조금전 적용했습니다.
TCRP 는 다시 빌드해야 mpt3sas 모듈이 버전업 됩니다.
버전에 5번이나 올라갔지만 아주 큰 변화사항은 없어 보여서 컴파일을 단행했습니다.
지금 안정성 시험을 진행하고 있습니다.
DS920+ 도 혹시나 될까 싶어서 한번 적용해서 시험중입니다.
SA6400 에 HBA 가 가능하도록 구현하신 중국의 jim3ma 님 코치를 받아서 모듈 활성화 중이긴한데,
많이 어렵네요. ㅎㅎ
역시나 KP 가 나긴했는데, 지난번과 다른 진전사항이 보입니다.
디버깅 메시지가 좀더 자세히 나오는군요. NULL pointer 오류 같은것 보이는데, 스트럭쳐 메모리 참조가 잘못된 모양입니다.
jim3ma 님께 또 질문해봐야 겠습니다. ㅎㅎ
BUG: unable to handle kernel NULL pointer dereference at 00000000000000e0
mpt3sas 에 대한 논의가 활발했었습니다.
이 토픽에 mpt2sas 와 mpt3sas 로 키워드 검색을 해보시면 그간에 변경사항과 안정화 과정에 대한 부분이 기술되어 있을겁니다.
https://xpenology.com/forum/search/?q=mpt3sas&quick=1&type=forums_topic&item=56872
pocopico 님이 41.00.00.00 을 개발하셨던 시점은 작년 1월 입니다.
https://www.broadcom.com/support/download-search?pg=Storage+Adapters,+Controllers,+and+ICs&pf=Host+Bus+Adapters&pn=&pa=Driver&po=&dk=&pl=&l=true
46.00.00.00 까지 올라가 있네요.
최신버전이면 무조건 좋다고 할 수도 없을것 같구요.
컴파일은 해볼 수 있는데 안정성 검증은 또 그 다음 문제라서요...
#define MPT3SAS_DRIVER_NAME "mpt3sas"
#define MPT3SAS_AUTHOR "Broadcom Inc. <MPT-FusionLinux.pdl@broadcom.com>"
#define MPT3SAS_DESCRIPTION "LSI MPT Fusion SAS 3.0 & SAS 3.5 Device Driver"
#define MPT3SAS_DRIVER_VERSION "46.00.00.00"
/* mpt2sas driver versioning info */
#define MPT2SAS_DRIVER_NAME "mpt2sas"
#define MPT2SAS_DESCRIPTION "LSI MPT Fusion SAS 2.0 Device Driver"
#define MPT2SAS_DRIVER_VERSION "20.00.03.00"
시놀만 그런게 아니라 다른 OS쓸때도 마찬가지인듯합니다 (보통 하드웨어 RAID 쓰지말고, 자체 RAID로 처리하라고 합니다)
개인적으로 생각하기에는 차이가 없다라고 생각하고 있습니다만 속으로는 모르죠..
저는 개발자는 아니니까요..
9211-4i 두 장 구매해서 하나는 IT 모드 하나는 IR 모드로 셋팅해서 HDD 테스트 용 정도로 사용하고 있습니다..