nvme u.2 서버용 ssd 장착하는 서버는 레인수가 엄청나게 많나요?

   조회 2282   추천 0    

대당  4레인씩 차지하면

 슬롯형으로 여러장 장착하면 해당 시스템에 레인수가 엄청나야 가능할것 같다고 보이는데요.


 

짧은글 일수록 신중하게.
박문형 2023-02
네..

CPU에 하나하나 직결하면 그럴 수 밖에 없습니다..
제온 스케일러블 1~2세대에서 패키지 하나에 48레인이었습니다. 지금은 AMD랑 경쟁하느라 더 많아졌을 것 같네요. 2개만 꽂아도 96레인이니까, 슬롯으로 좀 빼더라도 많기는 할겁니다. 4세대 플래티넘 하나 찾아보니 80레인으로 나오네요. ㄷㄷ
구차니 2023-02
https://d1o0i0v5q5lp8h.cloudfront.net/ampere/live/assets/documents/Altra_Rev_A1_DS_v1.30_20220728.pdf

이번에 가지고 놀려던 녀석인데 U.2 라서 좌절중입니다.
ampera altra 인데 ARM 기반으로 CPU1개당 128 lane 입니다.

24 * 4 = 96lane을 U.2 24bay에 할당해 놓은 녀석을 회사에서 보유중입니다.
(아래는 모델은 같은데 스펙이 다르네요..)
https://www.gigabyte.com/kr/Enterprise/Rack-Server/R272-P30-rev-100
박문형 2023-02
https://www.2cpu.co.kr/hardware_2014/45524?&sfl=wr_name%2C1&stx=epowergate&sop=and

U.2가 많이 달리는 시스템이 2U에 24베이 정도까지 있을 겁니다..

그러면 24 x 4 해서 96레인 입니다..

그러나 진짜 96레인이 다 CPU에 96레인으로 연결되는지는 모릅니다..

블럭 다이어그램이나 제품 설명 자료 같은 것을 봐야 됩니다..
     
sbg2005 2023-02
DELL이나 HPE의 최근 3~4년간 출고되는 메인스트림 서버들은 전량 CPU 직결 레인으로제공되는 편입니다.

※ CPU가 제공하는 레인 수가 워낙 풍부하다보니 PCIE 라이저 케이지 슬롯들도 별도의 칩을 거치지 않고 CPU 직결되는것으로 알고 있습니다.
sbg2005 2023-02
심지어 AMD EPYC CPU의 경우 CPU당 무려 128개의 PCIE 4.0~5.0 레인을 제공합니다.

예시로, 저희가 관리하고 있는 빅데이터용 서버의 경우

부팅용 480GB NVME 디스크 2개와 데이터용 4.8TB NVME U.3 24개씩 총 26개의 NVME 디스크가 장착되어 있습니다.
겨울나무 2023-02
규모의 경제군요. 가상화를 뛰어넘어서 클라우드박스로 처리되는 시장은 개인이 상상하기 힘드네요.
     
dateno1 2023-02
규모가 점점 커져서 이제 새로 나오는 U.3용 모델은 1개당 30테라까지 제공되거나 합니다

Storage 1개당 Pb단위 가능한 수치입니다 (그리고 이걸 100기가 듀얼로 물립니다)
박문형 2023-02
NVME 가 현재 스토리지쪽에서는 어찌 보면 재일 빠르다라고 할 수는 있지만 가격도 가격이고 기술적으로 레이드를 묶는 것은

한계가 많아서 이 쪽의 발전이 더 필요합니다..


대용량 스토리지에서 아직 HDD가 사용되는 이유는 속도의 문제를 떠나 그만한 용량을 구현할 수 있는 것은 HDD 밖에 없다 라고 할 수도 있습니다..

물론 대용량 SATA /SAS SSD로도 구현은 할 수 있지만 가격이 천문학적으로 되어 버립니다..
     
sbg2005 2023-02
16레인 잡아먹는 NVME용 하드웨어 레이드 카드가 있기는 합니다.

에러 발생률이나 그 성능상 한계가 아직 명확해서 CPU 직결 시킨다음 소프트웨어로 레이드 구성하느니 못한 상황인게 문제입니다.

나중에 PCIE 버전이 한 10.0정도  돼서 NVME 디스크를 1레인으로만 연결 해도 성능 손실이 전혀 없을 정도가 되면 어떻게 될지 모르겠습니다만...
     
dateno1 2023-02
가성비탓이죠

이미 U.3 SSD 1개당 30테라도 나오는 상태고, 2.5"라 이쪽이 밀도 횔씬 높으니 용량만 따지면 절대적으로 유리합니다

문젠 이걸로 P단위로 채울려면 금액이 넘사벽이라...
박문형 2023-02
개인적으로는 Pure storage 제품이 탐나기는 합니다..
     
sbg2005 2023-02
사실 언제나 답이 있기는 합니다.

돈. 돈만 많이 지불하면.... 말씀하신 제품이 대안이 될 수는 있겠습니다.

그마저도 아직까지는 성능상 이슈가 완벽하지는 않은 시점입니다.
간장게장 2023-02
PCIe lane에 직결하는 것 외에 PCIe switch를 쓰는 경우도 꽤 있습니다.

서버를 NVMe storage로만 쓰는 경우에는 덜하지만 GPU, NIC, SAS raid card 등등으로 PCIe 슬롯을 많이 사용해야 하는 경우에는 많은 수의 NVMe SSD를 장착하려면 switch가 필요합니다.

가장 기초적인 방식은 PCIe 카드 형식으로 된 switch card를 이용하는 것이고, 좀 더 많은 수의 SSD를 장착하는 경우에는 backplane에 switch 칩을 넣거나 메인보드와 backplane 사이에 midplane을 두어 거기에 switch 칩을 넣는 방식을 사용하기도 합니다.


QnA
제목Page 408/5731
2015-12   1793459   백메가
2014-05   5268428   정은준1
2019-02   4450   김제연
2014-08   3675   나파이강승훈
2016-11   6321   김건우
2015-11   3987   김건우
2009-10   9988   김건우
2019-03   3030   늘파란
2023-04   1689   엄청난x
2014-08   5217   무아
2020-05   3415   galaxyfamily
2019-03   2455   꾸띠웍
2023-05   2269   pumkin
2021-10   2153   AMD빌런
2009-11   8224   나너우리
2013-01   6762   이지포토
2021-10   2571   성기사
2014-08   7605   강성민
2015-12   5915   berna
2018-01   5883   주황별
2014-08   4348   일리케
2021-10   3142   겨울나무