[Network] Mellanox SX6012F, SX6036F - 이별, 재회 ... 그리고 삽질 ...

Inbusiness   
   조회 8508   추천 0    

몇년 전 테스트하다가 이런저런 사정으로 포기했던 부분(?)을 마무리 하기 위해 다시 구닥다리 Mellanox SX6012F, SX6036F 각각 2대씩 입양하였습니다만 ...

SX6036F 2대중 1대에서 PSU 장착 시 더 이상 들어가지 않고 고정되도록 지지되는 리벳 너트가 파손되어서 도착했습니다;;;

아래는 정상적인 PSU 지지대의 모습입니다.

그래서 그냥 리벳 자체를 제거한 뒤 Rack 장착 시 걸리적 거리지 않게 다듬었습니다.

장터발 SX6012F와 eBay발 SX6036F를 구매하여 드디어 서버랙에 장착이 완료되었습니다.

* SX6036F Rail Kit이 도저히 구하기 힘들어서 Rail Kit 포함 SX6025 2대를 구매하여 비상용으로 PSU 4개, Fan module 2개와 Rail Kit 2세트를 탈거하였습니다.

QSFP+ Transceiver가 도착하면 상단 SX6012F 2대와 하단 SX6036F 2대+Arista 7050QX-32S-R 2대를 연결하여 IB + ETH 2중화 구성을 할 예정입니다.

구닥다리 제품이지만 원하는 실습을 모두 해볼 수 있을 것 같아 매우 기쁩니다.

최종 구성 완료 후 ScaleIO, vSAN, iSER, BGP, VRRP, ECMP Leaf-Spine 구성 및 SR-IOV를 이용한 Windows, Linux Guest OS 내IPoIB, RoCEv2 kernel bypass transfer (Zero Copy) 테스트를 진행하여 볼 수 있을 것 같습니다.

모두 즐거운 실습을 진행하실 수 있기를 기원드리며 이만 줄이겠습니다.
짧은글 일수록 신중하게.
Linu 2023-09
으악 리벳이 저리 되버리는건 오랫만에 보네요.
좋은 데이터 얻으실 수 있길 바랍니다. ^^
     
Inbusiness 2023-09
PSU를 뒤집어서 안들어가니까 힘으로 밀어붙인 듯 합니다 ... ㅜㅜ
US 애들이 등빨이 좋으니 힘으로 밀어넣다가 우지끈 소리를 들은 뒤 움찔한 뒤 다른 멀쩡한 PSU를 더 강한 힘으로 밀어넣은 듯 합니다.
그나마 SX6025에 장착되었던 예비용 PSU 여러개를 확보하여 다행인 듯 합니다 ... ^^
병철 2023-09
배송 중 PSU 손잡이 부분이 충격을 받아 밀려 들어간 것 같습니다.
일전에 저도 ebay에서 SX6018을 구매 할 때 동일한 파손 경험을 한 적이 있습니다.
중앙 손잡이 부분이 요철처럼 돌출되어 있다 보니 충격에 취약한 것 같습니다.
저 같은 경우는 박스가 터져서 돌출된 손잡이 부분이 아예 다 갈려서 와서 바로 왜 파손 됐는지 알 수 있었습니다.

Lab 구성이 깔끔하고 멋집니다. 사진은 ToR인것 같고, 아래쪽에 더 엄청난 것이 있는것 같은데요 ^^;
아래쪽이 궁금해집니다 하하.
     
Inbusiness 2023-09
중간 PSU 사진에서 리벳에 고정되는 홈이 살짝(?) 손상된 부분을 보면 어떻게 문제가 되었는지 알 수 있었습니다.
PSU, Fan module 모두 장착을 위한 외부 손잡이 부분은 정상이었습니다...^^
Server Rack 정면 PSU, Fan Module 사진을 시간이 될 때 추가하여 드리겠습니다.

그리고 구닥다리 시스템이다 보니 최신 사양은 아닙니다.
그저 Protocol 별로 검증만 가능한 수준을 목표로 하고 있습니다...^^
송주환 2023-09
선 정리가 예술이네요. 좋은 랩 사진 잘 보고 갑니다.
저도 BGP 이중화 및 ECMP가 목표 중 하나인데, 아무래도 코어 스위치 이중화는 엄두가 안 납니다. 하하
즐거운 PoC 되세요!
     
Inbusiness 2023-09
제 경우 ECMP 기반 Leaf-Spine Network 실습이 목적이기에 간략하게 구성만 해볼까 합니다.
= 그냥 맛보기만 해볼려고 하는데 네트워크쪽은 워낙 깡통인지라;;;
GPGPU 2023-09
선 정리가 예술입니다 ㅎㅎ
로그인 하시면 댓글을 남길 수 있습니다


hardware
쓰기
제목Page 7/283
2014-05   5231707   1 정은준1
2015-12   1758399   1  백메가
2023-09   28039   1 정은준1
2023-09   30880   1 지존
2023-09   32941   1  witbox
2023-09   27569   1 지존
2023-09   25960   1 RuBisCO
2023-09   15394   1 박문형
2023-09   13596   1 지존
2023-09   11564   1 초리짱
2023-09   10562   1 메탈릭
2023-09   9813   1 정은준1
2023-09   8509   1 Inbusiness
2023-09   24596   1  witbox
2023-08   12450   1 song05
2023-08   30781   1 sinabro
2023-08   30313   1 RuBisCO
2023-08   36361   1 통통9
2023-08   41627   1 종이거인
2023-07   39146   1 김은호
2023-07   29651   1  현진
2023-07   23041   1 암굴왕
목록
쓰기