간장게장 2019-11

8 port 짜리는 아니고 4 port 짜리입니다.

같은 4 port 짜리 중에서도 PCIe x8 카드가 있고 PCIe x16 카드가 있는데, 저것은 PCIe x8 카드입니다.

https://www.ebay.com/itm/Oracle-7064634-PCIe-NVMe-Switch-Controller-Card/123746608663

이것이 PCIe x16 카드

SUN 7064634는 아래 링크한 x16 카드이고 x8 카드는 아마 다른 이름일 것입니다.
** 수정 x16 카드나 x8 카드나 7064634라는 딱지가 붙어 있네요.

어느 것이나 NVMe 4개를 연결할 수 있습니다만 x16 카드인 경우에는 대역폭이 높습니다.(12GB/sec 정도) x8 카드의 경우는 6.4GB/sec 정도
x16 카드는 PCIe 레인을 많이 사용한다는 단점이 있죠. PCIe x16 슬롯이 남아도는 경우에는 x16 카드가 유리합니다.

연속 읽기 쓰기의 경우에는 x16 카드가 대역폭이 높아 raid로 묶어 동시 사용시 성능이 좋긴 하지만 랜덤 write 같은 경우에는 x16이나 x8이나 별 차이 없습니다.(Optane SSD 4개 다는 경우 제외). 그리고 연속 읽기 쓰기의 경우에도 100% read, 100% write가 아닌 일반적인 mixed일 경우에는 별 차이 없습니다. 왜냐하면 NVMe SSD 속도 자체가 mixed인 경우 1000MB/sec 정도 밖에 안되니까요.(역시 Optane SSD 제외)

switch 카드이므로 다른 시스템에서도 잘 될 가능성이 높습니다. PLX 칩 혹은 Microsemi의 switch 칩이 들어 있겠죠.

가능성이 높다는 것은 짐작입니다. 확실한 것은 사용해 보아야 아는 것인데, 사용을 해 보니 않아서리. 하여간 제가 눈여겨 보던 제품이라 답변은 아니지만 써 보았습니다.

SuperMicro나 Intel에서 나온 switch 칩이 들어간 카드는 다른 시스템에서 사용해도 잘 됩니다. 그렇기 때문에 잘 될 것이라 짐작하지만 사용해 본 것은 아니라서리...

이런 NVMe switch 카드들은 retimer나 redriver 카드와 달리 PCIe bifurcation을 지원하지 않는 구형 메인보드에서도 사용할 수 있습니다. 그리고 디바이스 드라이버는 필요 없습니다.

드라코닉 2019-12

사실, 간장게장님이 이전에 올려주셨던 nvme combo drive kit 이야기를 보고서, 저도 그걸 사서 u2 nvme 드라이브들로 hdd 없이 ssd 만으로 구성하려 하고 있었거든요.
거기에 필요한 인터페이스 카드로서 가격이 합리적으로 보였으니까 말입니다.
핫스왑베이는 이걸로 하면 되는거겠죠?
Intel A2U8X25S3PHS 2U Hot-swap 8x2.5inch SAS/NVMe Combo Drive Bay Kit
그런데 redriver와 retimer의 차이는 뭔가요?

간장게장 2019-12

자세한 것은 잘 모르겠습니다.
하여간 메인보드가 PCIe bifurcation을 지원하는 경우에만 사용할 수 있는 것들입니다.
초기에는 redriver를 사용한 카드가 쓰였는데, 호환성이 매우 떨어졌습니다.

예를 들어 아래 리스트에서
https://www.supermicro.com/en/products/storage/cards
redriver라고 표기된 카드들(맨 뒤에 R자 붙은 것들)은 다른 회사 컴퓨터는 물론 SuperMicro의 서버들 중에서도 특정한 한두개를 제외하면 호환이 안됩니다.
Intel의 것도 마찬가지입니다.
그러나 retimer 보드들은 SuperMicro나 Intel 것이나 다른 컴퓨터에서도 PCIe bifurcation만 지원하면 대개 잘 작동되는 것으로 보고되고 있습니다.

간장게장 2019-12

저도 이걸 사용하지만 외국에서도 일반 컴퓨터 5.25인치 베이에 이것을 사용하는 사람들이 꽤 있습니다.
SATA/SAS와 NVMe 공용으로 사용할 수 있으니 참 좋습니다.

그런데 연결 단자가 sff-8643이 아닌 OcuLink입니다. 요즘은 카드나 백플레인이나 OcuLink로 통일되어 가고 있는 추세

예전 redriver 카드들은 대부분 sff-8643을 사용했고, 요즘의 retimer 보드들은 대개 OcuLink를 사용하고 있습니다.

PCIe switch를 사용하는 카드들은 예전에 나온 것들은 sff-8643을 사용했고, 요즘에 나오는 것들은 OcuLink를 사용합니다.

OcuLink를 사용하는 카드나 백플레인은 새로운 표준에 따라 만들어져서 대부분 호환됩니다. SuperMicro 보드에 Intel A2U8X25S3PHS를 사용하는 사람들도 있습니다.

만일 SUN의 switch 카드와 Intel A2U8X25S3PHS를 연결하려면 sff-8643 to sff-8611(OcuLink) 케이블을 사용하여 연결해야 하는데, 이게 방향성이 있습니다.
1. OcuLink 카드 <----> sff-8643 백플레인
2. sff-8643 카드 <----> OcuLink 백플레인
1번에 사용되는 케이블과 2번에 사용되는 케이블은 모양은 같지만 다릅니다. 따라서 케이블 선택에 주의가 필요합니다. 2번에 해당되는 케이블은 SuperMicro에서 팔기는 하는데 구하기가 쉽지 않은 것 같습니다. 1번에 해당하는 케이블은 eBay에도 간간히 나옵니다.

SUN의 switch 카드를 싸게 구입한다면 카드는 싸지만 케이블까지 생각하면 별로 싸지 않을 가능성이 있습니다.

Intel A2U8X25S3PHS를 사용하려면 연결단자가 OcuLink 인 카드를 사는 것이 바람직합니다.(SuperMicro나 인텔의 retimer 혹은 switch들)

SUN의 switch 카드를 사용하려면 백플레인이 sff-8643으로 되어 있는 것을 구입하는 것이 간단할 것으로 보입니다.(지금은 매물이 잘 나오지 않음)
아니면 백플레인 없이 sff-8643 to sff-8639(U.2) 케이블을 구입하여 직결하는 것이 제일 싸게 먹힐 것입니다.


LSI의 tri-mode 칩셋을 사용하는 보드들은 sff-8643을 사용하기는 하지만 또 별종입니다. 무쟈게 비싼 LSI 케이블을 사용해야 합니다.(sff-8643 중에서는 신형)

드라코닉 2019-12

2번에 해당하는 케이블을 아마존에서 팔긴 하는데 가격이 만만치 않네요. 인텔에서 핫스왑베이와 케이블, 카드까지 세트로 팔아주었으면 좋았을텐데 말입니다.ㅎㅎ

https://www.amazon.com/-/ko/dp/B07CJ97WXC/ref=sr_1_1?keywords=sff8643+%28host%29+to+sff8611&qid=1577563605&sr=8-1

김동수P 2019-11

sparc 계열에 들어가는 카드면 일반pc에서 거의 안되었던것으로 기억합니다.
바이오스 바꾸면 되는 경우가 있긴 했던것 같습니다.
너무 오래전이라 기억이 가물가물한데 아마 안되는게 맞을거에요.

간장게장 2019-11

Sparc 계열은 아니고 x86 서버에서 사용되는 것입니다.
Sun의 특정한 서버가 아니라 여러 서버(x86 계열)에서 공통적으로 사용되는 카드인 것은 확인했습니다.
웬만하면 Sun 아닌 다른 서버에서도 돌아갈 것 같긴합니다만 확인해 본 것이 아니라서...

드라코닉 2020-01

음. 일단 Z820 에서는 안되는 것 같습니다.
그래서 분노의 지름질로 인텔 8포트 스위치, 인텔 콤보핫스왑 AUP8X25S3NVDK, 인텔 oculink 케이블을 샀는데 이 핫스왑은 인텔 샤시 전용 같습니다. 잘못 샀네요.... 쓰고 계실 A2U8X25S3PHS를 샀어야 하는데 말입니다. Z820 에 안꽂힙니다.ㅜㅜ
높이가 2베이보다 좀 큰건 그려러니 하겠는데, 옆에 조금씩 나온 것들이 걸려서 5.25 베이에 안들어 갑니다. 이거 반품하거나 팔고 다시 사야 할 듯 합니다.T_T