 안녕Ȣ16;세요. 최근에 개1064;1201;1004;/196; 1204; 가상화 서버를 구성Ȣ16;기 위해 1060;리1200;리 머리를 1536;Ǻ12;1676;lj16; 1473;1060;라, 선생님들께 1312;Ǻ16;1012; 구Ȣ16;고1088; 1060;/111;,172; 찾아오,172; .104;었습니다(꾸ዚ1;)
보신 ǥ16;들도 여/103; 계시,192;1648;만, 최근 pfSense+용 1109;비 1656;문글, SuperMicro H11DSi1656;문글 모.160;, 1060;를 위해 1088;료수1665;1012; 해왔습니다.
1060;1204;에 소규모/196; 서버를 구성Ȣ16;여 운영1012; 해본1201;1060; 1080;습니다. 그 ǐ12;lj16; 1064;텔 1228;온에 호환성표에 큰 문1228;없lj16; 1473;고 서버를 1649;1217; 구매Ȣ16;여 운영1012; 했었lj16;데요, 1060;번에lj16; 상황1060; 1312;금 다릅니다.
먼1200; 상황1012; 설명드리기에 앞서, 구성Ȣ16;고1088; Ȣ16;lj16; 서버 스6169;1008; 아래와 같습니다.
CPU : AMD Epyc 7742(64C, 128T) x2 (총 128C, 256T)
M/B: 2슬ǘ15;1012; 1648;원Ȣ16;lj16; 보드라면 무Ꮗ1;1060;든1648;.
Storage: 1452;/196; 워크/196;드용 서버/196; 사용.112; 예1221;1060;라 데1060;터 IS 아카1060;브1032; ᅆ1;우를 1228;외Ȣ16;고lj16; SSD/196; 구성할 ,163; 같습니다.(용량1008; 결1221;.108;,163;1060; 없습니다.)
System Memory: 최소 1TB ~ 최대 2TB (해NJ17; 구성1008; 차후 확1109;1012; 위해 비dz12;더라도 1 Slot ECC/REG 3200Mhz 64GB메모리/196; 구매 Ȣ16;/140; 합니다.)
NIC: 10Gbps 2슬ǘ15;(최소) 차후 40Gbps확1109;도 계획1473;에 1080;습니다.
GPU: Tesla T4 (1060;,148; 선택1648;라,, 나1473;에 1089;업Ȣ16;다가 AI연산1060; 많1060; 필요Ȣ16;다 dz10;1004;면 구매해 확1109;할 생각1077;니다. Nvidia 라1060;센스 비용도 꽤 비dz12;서...)
OS: ESXi 8(8버1204;1012; 고1665;Ȣ16;/140; Ȣ16;lj16;데, 1060;유lj16; 라1060;센스 구매(7버1204; 구매가 개1064;에,172;lj16; 판매가 안.108;다lj16; 1060;야기가 1080;더라구요) & GPU Passthrough & 신버1204; 써보고dz10;1020;(ㅎㅎ!)에 1080;습니다.)
1648;1064;들과 1060;야기 했1012;ǐ12;lj16; 개1064;1060; 사용Ȣ16;/140; Ȣ16;lj16;데 1060;런 고사양1060; 왜 필요Ȣ16;냐lj16; 1656;문1012; 가1109; 많1060; 0155;았습니다. 1060; 1656;문1060; 여러ǥ16;들도 Ƽ17;금Ȣ16;실꺼라 생각Ȣ16;여 1687;,172; 설명드리1088;면, 1228; 1649;업1060; 0177;엔드 개0156;1088;1060;다 보니 1064;프라, 아Ȗ12;ᓮ1;처 설계를 1312;금 크,172; 1105;아서 운용해보고dz10;1008; 욕심1060; 1080;습니다(욕심치고lj16; 크긴 큽니다. 1060;번에 큰 투1088; 해놓고 오래 Ǹ16;/140; 합니다.). 물론 1060; 1104;만 아니라 여러 용도/196; 서버를 나누Ǻ12; 돌/140;.168;까 Ȣ16;lj16; 계획도 1080;습니다.
다만, 1060;/111;,172; 계획1008; 크,172; 1105;아.188;도 ኔ1;상 1473;고/196; 품목들1012; 1060;,163;1200;,163; 구해보/140; Ȣ16;니 여러 DŽ12;관1012; 만나 고생Ȣ16;고 1080;습니다.
1. 7002 SP3소Ȓ11;에 ESXi 81012; 1648;원Ȣ16;lj16; 보드1473;, 1473;고/196; 구매가 가능한 보드가 없lj16; ,163; 같습니다.
1060; ǥ12;ǥ16;1060; 1328; 마1020;에 가1109; ,152;리lj16; ǥ12;ǥ16;1064;데, 공식 Community Guide에서lj16; 7.0U3를 Full SupportȢ16;lj16; 보드1473; 대다수lj16; 8버1204;1012; 1648;원한다lj16; 글1012; 보기lj16; 했1004;나.. 실1228;/196; 1201;용한 국내 사/168;를 찾1012; 수 없Ǻ12;서 가1109; ,145;1221;.104;lj16; ǥ12;ǥ16;1077;니다.
,172;다가, vSphere라1060;센스 구매에 1228;약1060; 꽤 1080;lj16; 편1060;라, 맘편Ȣ16;,172; 8버1204;1004;/196; 선택Ȣ16;고 dz10;습니다.
ᕬ1;시 1221;말/196; 큰 문1228;가 없다면 7버1204; 1648;원보드를 구매해도 ƻ16;찮1012;까요? RAID카드나 NIC카드1901; 1648;원 문1228;라면, 1648;원Ȣ16;lj16; ǥ12;품1004;/196; 구매해 1109;착Ȣ16;lj16; 0169;식1004;/196; 해결할 생각 얼마든1648; 1080;습니다. 1312;Ǻ16; ǥ12;ᓠ1;드립니다.
2. 1064;프라 관/144;.104;Ǻ12;서lj16; Ȣ17;생 ǐ12; 따.164; 1088;ᅄ1;1613;1004;/196; 얼핏 알고 1080;lj16; 터라.. RAID1032; 문1228;1216;1060; ,145;1221;1077;니다.
사실 1060; ǥ12;ǥ16;1008; 구글링1004;/196; Ȣ16;다가 1096; 안.112;ᅆ1;우 1088;1452; 1060;곳에 들러 선생님들께 1312;Ǻ16;1012; 구Ȣ16;/140; 했습니다. 항상 소프트웨Ǻ12; RAID/196;만 구성해봤Nj12; 사람1060; Ȣ16;드웨Ǻ12; RAID카드/196; 구성1012; 1096; 할 수 1080;1012;1648;lj16; 1328; 고0124;1060; .104;긴 합니다만, 1060; ǥ12;ǥ16;1008; 머리 0149;치기 해서 0176;워보/140; 합니다.
3. 샤시 구매를 Ǻ12;디서 해야할1648; 감1060; 1096; 1105;7176;1648; 않습니다..
2U1221;도/196; 생각Ȣ16;고 1080;습니다. 1339;1008; 1228;품 1080;다면 추천 ǥ12;ᓠ1; 드리,192;습니다.(NJ17;1109;1008; GPU계획 없1020;. CPU쿨러와 메모리, NIC, RAID카드1221;도만 고/140;Ȣ16;/140; 합니다.)
k8s(Kubernetes)를 활용해서 아1452; 큰 규모/196; 설계를 해보/140; Ȣ16;lj16;데, 1060; ǐ12; Ǻ16;Ǻ12;나 프/112;1076;워크를 한 .160;Ǻ12;가1648;만 Ǹ16;lj16;,172; 아닌 꽤 많1008; 1333;류1032; Ǻ16;Ǻ12;와(프/112;1076;워크 없1060;) 프/112;1076;워크를 활용해서 아Ȗ12;ᓮ1;처를 구성해보고 연구Ȣ16;고 dz10;1008; 욕구가 넘ᒤ1;니다. 1088;기개0156;1012; 1339;아Ȣ16;lj16; 사람1060;라.. 투1088;를 마1020;먹고 Ȣ16;기/196; 결1221;했습니다. 1025;원 ǥ12;ᓠ1;드립니다.(1648;1064;들에,172;도 서버를 소ǥ16;해서 대여해1452;lj16;,163;도 생각 해보고 1080;습니다)
사실상 가1109; 큰,148; 보드1901; 문1228;가 가1109; 크,192;네요... 1060; 1656;문1012; Ȣ16;/140;다가 1204;체1201;1004;/196; 1201;Ǻ12;.160;면 더 1339;1008; 1032;견1060; 나올까 Ȣ16;여 1109;문 1460;1460; 1201;Ǻ12;봅니다..!
ᕬ1;1008;, ESXi보다 할만한 Hypervisor가 1080;1012;까요? 1312;금 편리한 관리를 원합니다.(Criteria Xen1008; 관리가 Ǻ12;/157;다..고 들었습니다.) 사실, 1228;가 써본 Ȣ16;1060;6140;0148;1060;1200;가 ESXi1104;1060;여서 안1204;Ȣ16;,172; ESXi 가고dz10;기lj16; Ȣ16;네요...
DELL 이나 HP 중에서 해당 ESXi 8을 공식적으로 지원하는 시스템을 찾아보시기 바랍니다..
인텔 스케일러블 1세대 부터 많은 부품들이 CPU에 전용화가 되어가다 보니 국내에서는 쿨러도 재대로 된 것 구하기 힘듭니다..
베어본이나 벤더사 시스템으로 한번에 턴키 구매 하는 것외 현재 방법이 없습니다..
그리고 코로나 문제 /반도체 대란 / 제조사 상황 악화 /환율문제 등으로 국내에 재고가 잘 없는 경우가 부지기수이며 보통 견적 받으면 몇개월 뒤에 수급 가능
정도인 경우가 많습니다.. 그리고 물건 인수 받을때 갑자기 가격이 올라서 돈을 더줘야 할 수도 있습니다.. 생산이 안되서 딜리버리 타임이 더 길어지는 경우도 많고요..
AMD EPYC 서버는 3세대나 흘러왔지만 아직 조립 서버가 없다라고 볼 수 있습니다..
전세계적으로 보면 AMD EPYC 이 3세대 부터 많이 팔린 듯한데 우리나라는 인텔만 최고라는 고집이 많이 강해서 실제 AMD EPYC 서버 사용하는 곳은 적다고
밖에 볼수 없으며 중고는 더 보기 힘듭니다..
AMD EPYC 서버 생각하시면 3세대 이후 버젼을 구하시기 바랍니다.. 그래야 성능이 대략 동시대 인켈 스케일러블과 맞붙을수 있습니다..
고생을 할 각오로 이번 서버를 준비하고 있습니다.
중고품목은 Ebay에서 구매하려 합니다.(적어둔 품목들은 전부 재고가 많은 품목들입니다.)
SP3의 경우, 쿨러가 꽤 많이 나와있어서 고민해본적 없었습니다. 제가 잘못 찾아본 것인지 확인 해봐야겠네요.
국내 재고는 고려사항에 없었는데, 국내에서도 구할 수 있는 다른 방법이 있었군요!
수정답변 감사합니다.
고장나면 AS보내야 하는데 그것도 운송비니 모니 만만치 않습니다.. 재대로 고쳐진다는 보장도 없고요..
CPU는 여기 장터의 풀로드님의 게시물을 찾아서 비교해보시기 바랍니다..
다만 이센셜 이나 파운데이션 라이선스는 모르겠네요.
이센셜 라이센스 구매하려 했는데, 이 부분 추가 조사 해보도록 하겠습니다. 감사합니다.
보드는 조심해야 하는게 보드 리비젼에 따라서 3세대 EPYC 지원이 되고 안되고 합니다..
바이오스는 보통 업데이트 하면 대략 다 먹히지만 TDP 크기가 3세대 와서 많이 바뀌어서 3세대를 재대로 지원하는 보드는 보통 CPU 전원부가 다릅니다..
국내 수요가 적어서 많이 팔리지 않기에 구입했는데도 1/2세대만 지원하는 보드를 구하는 경우도 있으니 제조사 홈페이지에서 잘 확인하시고 구입하시기 바랍니다..
너무 무리 하지 마세요..
---------------------------------------------
제 직업이 백엔드 개발자이다 보니 인프라, 아키텍처 설계를 조금 크게 잡아서 운용해보고싶은 욕심이 있습니다(욕심치고는 크긴 큽니다. 이번에 큰 투자 해놓고 오래 쓰려 합니다.
-----------------------------------------------
HP DL380p G8 - 3 대 정도 사서 연습 하세요.
중요한 프로젝트
중요한 서버 군단
중요한 서비스 군단.
거의다....다 DL380 G10 아니면 Dell R740, R750 이어요
AMD Epyc 않써요..
현실을 직시 하세요. !!
그리고,, ...지금 사시려는 서버 조립(슈마) 아닌 이상 델로치면, ..최소 견적만 2~4천 이상일거같은데 ....예상하고계신지 ..
견적 자체는 인지하고 있습니다
OS부분에서 커스텀 OS로 하드웨어 지원도 어느정도 되니까요
그리고 Tesla T4는 이제 단종이라 구하기 어렵지않을까요…
처리율도 요즘 카드에 비하면 떨어지는지 고객사에서 T4 2개에서 A4000 1개로 바꾸더군요.
좋은 정보 감사합니다. 고려 해보겠습니다.