안녕하세요
r740xd 부품 구성중에 아래와 같은 메세지가 나오는데
idrac에서는 아무런 오류가 표기되지 않지만
os부팅중에 아래 메세지가 나오면서 일단 멈춥니다. 이후 OS로 진입은 할 수 있지만..
"
"
현재 24bay NVME를 구성 시도해보고 있는 상황에서 발생된 에러 메세지입니다.
해당 구성을위한 부품은 (상세부품명까지도 모두 확인) 모두 충족하였습니다. (케이블까지도)
전용 24bay NVME 백플레인(FJH5T) 과 NVME 12개씩 추가애드온 PCI 스위치카드 (W0DNK) . 2개 로 구성되어있습니다.
(NVME전용 24bay backplane은 sata sas안되고 nvme만 할당하는 것으로 별도 백플레인입니다.)
CPLD 수동업데이트 하여 1.14 버전이고
심지어 PSU도 최신업 해줬습니다.
PCI 갈아끼워보고 메인보드도 갈아끼웠는데 위 에러 메세지가 계속 나오네요..ㅜㅜ (라이저는 대체품이 없어서 그대로라 라이저1이 문제인가 싶기도하고..)
3번슬롯이라는걸 보니 라이저1번 문제인것 같습니다만.. 에러메세지로 봐서는 4배속 링크인데 2배속으로 작동중이다 뭐 이런소리 같아서
케이블이 문제인가 싶기도 한데 케이블은 잘못되면 바로 disconnect 가 뜨기문에 케이블 문제는 아닌것 같다는 판단입니다만
Dell 메뉴얼에서는 이 문제에 대해서는 정보가 없네요.. 구글검색에서도 정보가 몇개 없고 해당사항이 없어서..
고수님들 도움을 좀 청해봅니다
특이점은 라이저2번을 빼면 24bay 백플레인이 BP1 이고 라이저2 (똑같이 생겼지만 다른 DPN인 RN1V2) 가 BP2 로 작동해서 다른에러가 나옵니다.
다만 R740이면 이미 보증이 만료되었을 텐데, 벤더의 지원을 받을 수 있을지 모르겠네요.
네 케이블은 아직 교체해보지 못했습니다. ㅜㅜ
https://graphwoody.inblog.ai/faefield-application-engineer%EC%97%90-%EB%8C%80%ED%95%9C-%EC%9D%B4%EC%95%BC%EA%B8%B0
저는 FAE(Field Area Engineer) 로 알고 있는데 하는 일은 거의 비슷합니다..
제조사 고객에서 나오는 문제나 기술적 요구사항을 수집하여 분석한 후 검증하여 개발팀이나 QC 팀 그 외 영업팀쪽으로 보내어 해결해주는 것입니다..
이렇게 될려면 우선 고객등록이 되어 있어야 하고 MOU 정도는 되어 있어야 가능합니다..
저는 옛날에 TYAN쪽과 일하면서 FAE와 Sales 와는 거의 항상 소통하고 있어서 대략 모라고 하는지는 알고 있습니다..
현시점에서 문제는 제조사에서 보증하는 저 셋팅에 대한 확실한 매뉴얼이나 셋팅하는 방법/셋팅시 필요한 부품목록 등을 구할 수 없는게 가장 큰 문제입니다..
하라는데로 해보세요.
1. iDRAC 초기화
2. PCIe NVMe Card Firmware update
NVME 및 NIC조차 꽂지 않고 해봐도 저 메세지가 뜨네요.. ㅜㅜ
"전용 24bay NVME 백플레인과 NVME 12개씩 추가애드온 PCI 스위치. 2개 로 구성되어있습니다."
740XD에 NVME는 PCIe slot에서 나가지 않고 MB에 있는 MiniPCI에서 나가지 않나요?
PCIe slot으로 하면 당연히 lane 부족하고, 이런 메시지 나오겠죠
NVME 12개씩 스위칭 해주는 추가애드온 PCI 스위치카드 (W0DNK) . 2개 로 구성
(NVME전용 24bay backplane은 sata sas안되고 nvme만 할당하는 것으로 별도 백플레인입니다.)
lane이 부족해서 저 스위치가 lane을 조정해준다고 포럼에서 보았습니다.
이 질문에서 이어지는 것입니다..
온보드에서 다 뽑으신건지, 온보드 + pci retimer 카드로 혼용하신건지 궁금하네요.
nvme 디스크 한개가 x4배속이니, 24개면 94lane이 확보되어야 일단 문제없을것 같긴합니다.
전용 24bay NVME 백플레인(FJH5T) 애드온 PCI 스위치카드 (W0DNK) 입니다.
PCIe 슬롯을 "Auto" 또는 "x4x4x4x4" 모드로 변경 후 테스트.
이게 계산이 않 맞는데요..
1.33 LANE 이면 3분의1 배정인데.. 그러면 3GB U.2 => 1GB 나오는건데.
그러면 SAS SSD 보다 느려지네요.
그래도 총 대역폭이 30GB..
100Gbps 3 port 쓸수있겠네요,
고속 All Flash 스토리지
영상 렌더팜 스토리지/ 언리얼편집스토리지로 쓰고 있는데(납품).
EPYC 2cpu
RAM 256GB
U.2 15.36TB x 24ea (Intel D7-P5520) = pcie 96 lanes
Read cache: 960GB
Write cache: 960GB
100GbE 2port
10GbE 4port
96+16+16+8 = 최소한 136 레인이 필요합니다. ==== 그래서 제온Dual 로 할 수 가 없는 것이죠.....EPYC Dual만 가능합니다. (256 레인 )
여기에 HBA 나 HCA도 2장 더 달아야 하는데.. 슬롯이 모자라요.. 설치 할 수가 없더군요.
그럼
96+16+16+8+8+16 = 160 Lanes