100TB~ NAS 帳ϴ

   ȸ 4692   õ 0    

안녕하세요 연구실에서 운용할 NAS를 구축하려고하는데요 영상데이터들이 굉장히 많아 용량을 가능한 크게 잡아야 하는 상황입니다 지금까지는 제가 개인적으로 집에 구축한 헤놀로지 홈서버를 이용했었는데 이젠 규모가 커지고 운용에 어려움이 있어서 완전히 시스템을 상위버전으로 새로 구축하려고합니다

 

그런데 구축하려고보니 비용이 생각보다 만만치 않더라고요.... 저는 여기에 계속 있을 입장이아니라 처음에는 유지보수 쉽게 업체에서 서버를 주문하거나 클라우드를 쓰려니 가격이 상상초월이고 시놀로지나 Qnap등에서 나온 완제품 NAS를 사자니 이것도 가격대비 사양이 영 마음에 안들더라구요... 데이터크기가 크기인지라 내부망은 전부 10gbps로 구축해서 사용예정인데 아톰이나 셀러론정도로는... 제가 집에서 운영해보니 한명도 버거워하는게 보여서 집도 i3 10105를 올려서 쓰고있는 상황이거든요

 

그래서 생각을 해보니 구축만되고 초반 트러블슈팅과정만 거치면 향후 운용에는 큰 지식이없어도 운영이 가능한것 같더라구요 그래서 완전히 부품들을 다 사서 자체적으로 구축을 하려고하는데요 제계획은 i5 + 64gb 램에 메인보드 sata8개 되는걸 구비해서 16TB 8개를 꽂고 M.2 SSD 들을 추가해 캐시및 os디스크로 활용할 계획이였습니다 OS는 트루나스올릴 계획이였구요 

 

그런데 문제가....제가 헤놀로지랑 공유기정도만 해보고 트루나스는 처음으로 시도하는거라 어떻게 구성이 될지 감이 안잡혀서요 ZFS는 레이드가 어떻게 구성이되나요? 위 내용처럼 총 128TB구성을하면 실제로 활용할수있는 공간이 어느정도로 잡히게 되는건가요?

그리고 원래 서버부품들을 쓰려다가 가성비가 영엉망이라 일반 데스크탑 제품들로 꾸리려니 sata포트가 좀 모자란 감이없잖아 있더라구요...앞으로 데이터가 계속 늘어날거라 확장도해야되고 기본적인 용량도 최대한 많이 쌓아놔야하는데 pcie에 sata확장카드를 붙이려니 안정성과 성능이 의심되고... sas레이드카드를 꽂으려니 호환이 되는건지 모르겠습니다...운용경험도없고..ㅠ 그래서 어차피 케이스도 일반 데스크탑 케이스 (T900)을 활용할계획이라 하드 낑겨넣어봐야 10개이니 외부에 DAS로 썬더볼트 연결을 시키는것도 생각을 하고있는데 이런경우는 OS에서 어떻게 인식하는지도 잘모르고... 어떻게 하면 좋을까요?

 

그리고...무엇보다... 위 내용처럼 자체적으로 제작해서 굴렸을때 흠....문제가 생길일이 많을까요?... ㅠ 제가 일단 자체제작으로 질문을 드리긴했지만 자체제작이아니여도되니 100TB~이상급의 스토리지 서버를 구축할수있는 방법이 있다면 알려주시면 정말 감사합니다!




ª ϼ ϰ.
2022-10
ջ ߻ص ڷ ̽ö ϼŵ
߿Ͻø ǰ մϴ κе ϱ ̰ŵ
     
hypothalamus 2022-10
ǰ̶ Ͻø ̳ HP Ǹϴ Ͻô°ǰ???
          
2022-10
׿ ƴϸ ó ƿ
               
hypothalamus 2022-10
ó ʹ 󱸿 ӵ ȵɵմϴ
               
dateno1 2022-10
100T ó ƴ϶ ƿ

忡 ó 躸(?) Դϴ
2022-10
ƴ϶ ׳ ⼺ǰ Ͻñ ٶϴ.

ȸ簡 ؾ , ʹ δٰ ؼ ٰ ؾ Ȳ ƴմϴ.

߿ ׸ξ " å" ˴ϴ.
     
hypothalamus 2022-10
Ф ± ....
ڹ 2022-10
HP /DELL 翡 丮 ü ַ ֽϴ..( 丮 ǰ OEM)

׷ ǰ̳

丮 EMC /NetApp ǰ ֽϴ..

ū ̳ մϴ..

..

丮 Ͻôµ  ̽ Ͻ ٸ ϸ  丮 ϼž ϳ׿..

丮 DAS /NAS /SAN ũ зմϴ..
     
hypothalamus 2022-10
NAS ȹԴϴ ϽŰó ݹ ü Ϸ մϴ
          
ڹ 2022-10
               
hypothalamus 2022-10
Ŀ ġ ʰֽϴ 뿪 ʿ 2 10gbps ī NAS ̷ƮϿ ȹԴϴ
                    
ڹ 2022-10
뷮 Ʈӵ ۾Ƽ ߿ Ͻ

100G Ʈ 丮 뷮 ֽϴ..
          
CPU4 2022-10
̿ ͳͽε ü ̶ ϵ Ӹ ʽϱ?
     
hypothalamus 2022-10
...࿡ ׷ٸ ũ ó ġ ƴ϶ SFP Ѿ 40gbps~ ׷̵ ؾ߰ڳ׿
dateno1 2022-10
׷ 뷮 ϽǷ RAID ؼ ʿ 뷮 ʿ ũ ϰ, Ȯ ؼ ణ װ ̽ Ŀ ϼ

 ī带 Ἥ ũ ȮҲ ַ ؼ ȣȯǴ Ȯؼ ּ

Ʈ Ǵ OS ǹǷ Ǵ Ĩ ݵ Ȯּ (ű ǻ Ʈ 󰡹Ƿ ϴ) ( ϴ° غ)

ϼ̴ٸ ʿ ī带 ϰ, ʿ Ȯ强 NIC Ȯ强 ʿ PCIe Lane Ȯؼ ؼ 带 Ͻð, ʿ ɰ ȣȯǴ ǻ ּ

ǻ, , ũ, Ȯī, Ŀ, ̽ 뷮 ̰ ؼ ޾ּ (߿ Ȯ Ǵ κ̴ ϸ鼭 ص ˴ϴ)

ϰ غôµ ۾ ƴϹǷ ұԸ Ұ ƴ϶ ׳ ° ؿ

ü ̶ ƹ , ̶Դϴ

Storage ؼ ũ ޾Ƽ ϸ ϴ°ͺ ΰ ϴ
     
hypothalamus 2022-10
Ȯ ؼ ̽ Ŀ Դϴ 繫dzο ΰ Ұ̶ Ϲ ̽ ʹ ò 濭 ߾ȵɰͰ ũž ̽߿ ϵ庣̰ ߿ Ǵ ǰ մϴ. Ȯ sataȮ Ǵ ̵ī带 ٿ ȹ̳ ȣȯ OS ߸𸣰ڽϴ٤쿡 ưϴٸ... óẸ°̱⿡... Ʈ մϴ ó 12 z690 ȹԴϴ Ʈ ڴ ֽϴٸ OS ȣȯ Ե 𸣰ڳ׿... 64gb ְ ־Ͱ 100TB̻ ZFS 64Ⱑ Ѱ ߸𸣰ڽϴ٤ ȴٸ 128gb ְڳ׿ ֽŰó ŵ غ ϴ 2 Դϴ
          
ڹ 2022-10
繫 ؾ Ѵٸ ϴ..

Ͻñ⸦ մϴ..
               
hypothalamus 2022-10
....׷ ...Ф... ࿡ ȵȴٸ ǹ ʿ  ֽϴ
          
dateno1 2022-10
ũ 100T + ZFS ߽ø 128Ⱑ ä, ɽ SSD Ⱑ ٴ° õմϴ

ٸ Cache NVMe + ũ Ȯī + 10Ⱑ ޲ ſ Ƿ Z + iδ ɲϴ ( Ȱ ͽƮ غ)
               
hypothalamus 2022-10
...̿??? ̷.. û ƸԳ... õ ȰҼ ֱմϴ ȵɵѵ ð... ǰڳ׿
                    
ڹ 2022-10
1000 18TB ϵ ٰ ݾ Դϴ..

ϵũ ..
                         
hypothalamus 2022-10
׷? ˾ƺ ðƮ ҽ 16TB 10 뷫 5~600 ϴ ʹ̴ ʿ ϴ 100TB 1 Ϸմϴ
                    
dateno1 2022-10
Zδ CPU Ǵ°  ٰ ص Ƹ 8+8+4 Ѱ, x4 1 PCH ġ ϴ

x8 2 ũ Ȯ ī ɾƹ, x4 NVMe-PCIe ȯ ȣ  10G ٰ ĵ x4 1  ˴ϴ

CPU ű ʿ䰡 µ (i7 մϴ), PCIe Lane

10Ⱑ ϰ, NVMe  ɰ, RAID 2 νƮ ǿ
                         
ڹ 2022-10
+100
                         
hypothalamus 2022-10
κ SATA 8 ̿ϰ 2 Ȯī忡 Ϸؼ ϴ ٸ...װ ƴϿ... ؿ Ͻſ׶ Ϲ ýδ ڳ׿...
                         
dateno1 2022-10
2 Ȯī 1 Ǵ 10Ⱑ 1 Dz Ե ǰڳ׿ (ɽ NVMe 2 )
CPU 1 (x8) : 10G
CPU 2 (x8) : RAID
CPU 3 (NVMe) : NVMe
PCH 1 (NVMe) : NVMe
̷ ǰڳ׿ ( ġ 100% 뿪 ° ƴϴ PCH Կ ֽϴ)

CPU 1 NVMe 2 , CPU 3 NVMe-PCIe ȯϰų, PCH Ȯ Կ 10G Ȯϰ ҴѴٴ ֽϴ (CPU 20/PCH 4 ߺ Ҵϴ°Ŵ ֽϴ)

Ȯī ٽDz Ȯī带 CPU Lane PCHüٵ 뿪 ʿ ũ ɾּ

º 8 Ƹ 6 PCH ⺻ ̰, 2 ASMedia Ĩ Ἥ øų, PCIe ٿ ߰ 뿪 Ȯؼ øɲϴ (ڰ )
                         
hypothalamus 2022-10
½ϴ Ȯ ϽŰó ý Ϸ ߽ϴ SATA 4 nvme԰ 뿪 ϴ¹̶ 2 б/ ij÷ ΰ ϳ OS SATA ҴϷ ߽ϴ ٸ.. ؿ ٸе ϽŰó ̳ Ȯ强 ǰڳ׿
                         
dateno1 2022-10
Lane ϱϳ׿

׷ ߺ ҷ x16 뿪 8/4/4  NVMe 2 ( )ϴ ؾ߰ڳ׿

Host OS ũ ߿ ƹ SATA Ʈ SSD 2 ɾƼ RAID1̶ صμ
                         
hypothalamus 2022-10
¾ƿ ̴ ϸ Ƹ ׷ ϰ ɰ̴ϴ  :D
ڹ 2022-10
Ʈ ַ ̴ Դϴ..
     
hypothalamus 2022-10
ֽϴ 츸 ϴ° ƴϿ ٸ ؼ⺸ٴ ܼ ӵ Դϴ ܺ DAS 뷮 ü Ʈ3ӵ ҰͰƼ
ڹ 2022-10
׷ ӵ Ͻø 4K մϴ..

ƴϸ Ǯ ÷ 丮 ַ Ǿ ..
     
hypothalamus 2022-10
SSD ׷ ý Ͻô±......ϴ ͵ ũⰡ 100gbϴ ijÿ HDD ҰͰϴ ۾ 10gbps ӵ ˴ϴ
մ 2022-10
VM Ʈ糪 ġϽ ʿ ִٸ մϴ.  ZFS ϵ ECC ޸𸮰 ݵ  غϼž մϴ.
     
hypothalamus 2022-10
ECCʼΰ? Ʈ糪 ECCƴϿ ȴٰؼ ϰ־ϴ٤
          
ڹ 2022-10
Ǿ Ǹ å??

100TB 伥 ϳϳ ??
               
hypothalamus 2022-10
ؾߵɰ ....
                    
ڹ 2022-10
ʹ ּ 3 ־ ּȭ˴ϴ..
                         
hypothalamus 2022-10
NAS ٸ ̿ ִ° ־ ݿ ʾҽϴ
          
dateno1 2022-10
AMD ø 忡 Pro ξ Ryzen ø ECC ȴٰ մϴ

ƴϸ ̳ / ø ECC ˴ϴ

߿䵵 ڷḦ ٷ겨 ZFS ECC õǰ, ZFS ECC ϰ õǴ ֽϴ
               
ڹ 2022-10
ECC Դϴ..
                    
dateno1 2022-10
ϴ µ, ϴ Ŀ  ϱ ׿ (Ȥ ?)

̾ UPS ٰܴ ĵ Ϲ ž Ŀ 2,3ȭ ϱ ϱ
                         
ڹ 2022-10
ƽð

ATX Ŀ ϵ ٴ° Ѱ谡 ־ ..

Ʈ Ŀ ۿ ϴ..

745 /747 ̽ ϸ ( ̽ ʽϴ..) ֽ 8 ַ Ʈ ý մϴ..

PC ¦̳ ¦ DAS 丮 ̴ մϴ..

PC DAS 丮 ȭ ϴϱ..

ܴ 丮 ϰ..

׷ ͵ Ϲ PC 麸ٴ ֱ⿡ ƴ Դϴ..

ְ..
                         
dateno1 2022-10
ü ׿

100׶ 10 ɱ ׳ ATX ƼҲϴ (12V ߶ нϰ, 5V 10 Ե ɲϴ)

׷ ̽ Ŀ ǰ ̽ ɷ ϰ, ũ ܺη SASɷ Ҳ׿
                         
hypothalamus 2022-10
ũž ̽߿ Ϲ ATX Ŀ ΰ ϴ ֽ̽ϴ Ŀ ð 24 Y̺ ־ ϸ ý ޿ 󱸿 ٸ ϵ带 DAS ߰ ʰ 10 ʰϿ ýۿ ϱ⿣ Ͱ Ϲݼ Ѿؾ߰ڳ׿
2022-10
Ϳ ٴϴ° ϵ ޼ ִ° ϰ ޸ Ǯũ ؼ TrueNAS °ͺ ξ ɿ Ұ̴ϴ. ְ ε ϸ ִ ȳ մϴٸ ׷...
10G 40G Ʈũ Ѵٸ ɵ ʰ 뷮 ũ 󸶳 ֳĿ ޷ ֱ⿡...
Ŀε ϳ UPS ް ϳ ϰ ϸ ȣ ɰ ׿.
Ʈ̵ ޸𸮸 бij ־ IO ־ ũ Ͽ δ ٴ ֽϴ.
ϵ ̵ó RAID5(RAIDZ) ϸ ȵǰ 1+0 Ȯϸ ؾ ̰ ӵ ϴ.(Ʈ̵ 1+0)
¼ֶ󸮽 ZFS Դµ Ȯ TrueNAS ϴ󱸿.
TrueNAS ߸ ϸ 丮 Ⱥηϴ.
R730xd 18׶ Ǯ ä 10 ϸ 90TB ð ׿. ũ SAS.

TrueNAS ϴ° ̸ ȣȯ ̽ ⿡ ؼ .
     
hypothalamus 2022-10
ϴ ƴϿ θ ޺е ־ ü űմϴٸ ϽŴ UPS ȹ ־ϴ ᱹ... ... ؾ߰ڱ.....ϱ...sasī ϰ...ǰ..ص ϳ׿...Ȥ SASũ 𼭱ϳ?? ٳ̷ ƴѰͰ... 翡 ϳ?
ڹ 2022-10
ϵ 翡 ϵ带 Ǹ ʽϴ..

ص 츮 ϵ ű⼭ ޾ƶ մϴ..

׸ MOQ ֱ⿡   ּ1000 ȳɴϴ..

ϴٰ ؿ RMA ϴµ ̰ ŷ ۺ ˾ƾ ֽϴ..

RMA Ⱓ 뷫 2 ̻ ɸ̴ϴ.. ٵ Ƽ..RMA ؼ ޾Ƶ ݴϴ.. ļ ..

ϵ ̸ ٳͳ θ ϴ° ׳ ΰ ̸ ̳ ϵ ޾ƾ մϴ..

ȯ Ƹ ö ̴ϴ..
     
hypothalamus 2022-10
....Ѿ ̱
          
2022-10
ϵ ׳ ٳ ֹ ϼŵ ˴ϴ
100TB غ ϵ 10 ȵ˴ϴ
ް ׷ ʿϽø ǿ غø 帱̴ϴ
               
hypothalamus 2022-10
մϴ :)
                    
ڹ 2022-10
Ƹ οԴ ְ ٳͿ ø AS ϴ Կ Դϴ..

ðƮ Կ : ǾƮ 

WD ( Ÿġ ) Կ :

ܵ ȸ ֱ մϴ..
                         
hypothalamus 2022-10
׷...մϴ ϴ ¶αŷ ؾ߰ڽϴ
                         
ڹ 2022-10
ٳͿ ε ֱ⿡ δٰ ٰ ASȵǴ ǰ ȵǴ ϴ 쵵 ֽϴ..

θ ǻ̳ ׳ մϴ..

εϵ ǰ ϵ Ǹ ϸ 꼭 ൵ մϴ..
                         
hypothalamus 2022-10
... մϴ
2022-10
ϴ ˷ֽø е 帮⿡ ..մϴ
ϴ
     
hypothalamus 2022-10
1000~1200 ƽøؼԴϴ ȹ 7~800 ϰ ־߽ϴٸ
          
2022-10
û ŸƮ ϱ....18TB SAS ϵ 10 Ƶ...
               
hypothalamus 2022-10
ŸƮ..Ѱ̿... ʹ ߾
ڹ 2022-10
ϵ 1 12V ũġ 2A 5V ũġ 1A ϵ尡 Դ ⸦ ؾ մϴ..

12V ַ ÷͸ µ ǰ 5V ַ ȸΰ ϴµ ˴ϴ..

ٳͿ ̴ Ϲ ATX Ŀ 5V /3.3V 25A κ̰ ְ ϵ带 30A Ǿ ϴµ

̷ Ŀ ǰ ݵ Դϴ..

15 ص 5V/3.3V 30A Ŀ Ծµ GPU ߴ ʾƼ 12V ʾҴ

Ŀ ڿ GPU CPU ⿡ 12V â Ŀ 5V/3.3V 뷮 ۾ϴ..

ǻʹ Ŀ 뷮 ˳ؾ Ż մϴ..

Ŀ ȸ ǰ ܿ ʽϴٸ..( Ŀ Ϲ 忡 ϴ..)

Ѵٰ ϴ Ŀ ϰ ..
     
hypothalamus 2022-10
Ŀ ߿伺... ̸ п ü ٸ ִ Ŀ ΰ ȹ̿ϴ 24 ø͸ ̿ؼ ΰ ȴο մϴ :D
2022-10
ٽźе Ͻôµ  о 𸣰 ϴ ư Ȳ ÷ٸ... ϳ ū ý Ͻô ͺٴ ΰ Ҽӵ ο ִ ؿ Ͻð ߰ ý ؼ Ŭͷ ֽϴ. ׿ ° ġ ־߰ ׸ ZFS 1T 1G Ͻø ɰ̴ϴ.
ecc issue Ʒ ϼ.
https://www.truenas.com/community/threads/ecc-vs-non-ecc-ram-and-zfs.15449/
     
hypothalamus 2022-10
ÿ Ը ϴ ȯƴմϴ٤ ѵθ 뷮 ϰ ο ص Ʈ ũ ͰƼ ߿ Ȯ Ŭͷ ϴ¹ ڳ׿ ZFS 1T/1G ˰ֱ߽ϴٸ Ʈ̶ ȯ渶 ޶ִϿ ⿡ ýϴ٤ ϴ ִ Ѹŭ ڱؾ߰ڳ׿ ũ մϴ
          
2022-10
ũ ֺٴ ý/Ʈ ֵ ǰ е ⵿Ѵٰ ذ ʾҽϴ. ũ ٲ缭 ϸ ٸ κ ... HA ϼžҰ̴ϴ.
               
hypothalamus 2022-10
׷... HA ϴ... ƴҰ ϴ 1ý۸  Ϸ°űؼ.. ص Ŀ±䤻
          
dateno1 2022-10
100T ߾ 100G ׳ 128Ⱑ äž߰ڳ׿

HA.... Ǹ غ (ִ 1 ־ ϴ þ)
κ7 2022-10
2cpu Ϳ 8BAY̻ 2U SAS +Xeon+CPU+MEM + HW̵ + 10gī ãż
HDD ǰ ż ߽ø õ մϴ.
б ޷Ʈ Ǵ° Ƽ մϴ.
     
hypothalamus 2022-10
Ȯ ׹ ΰ ׿ Ʈ ŷϴ ٸü ߰ մϴ
ڹ 2022-10
ū ϼ ֽϴٸ

б ȳ ȳɴϴ..

Ư ߰ ȳ ˰ ֽϴ..
     
κ7 2022-10
߰Ʈ ȸ ں ϼž ҵϳ׿ ^^
     
hypothalamus 2022-10
ʾƵǴ ̶ װ ȵɰͰϴ ߰ Ͻ ṵ̄ڳ׿
ڹ 2022-10
̵ ī ̺ ̽Ű??

̵ SAS ̺  ݵ ˴ϴ..
     
hypothalamus 2022-10
׿ Ǿ ãƺϴ ȲԴϴ..ФФФ.... ߰ μ ϰ־µ Ѱ...?
          
ڹ 2022-10
ƴ ʽϴ..

LSI ǰ Ĵ ϴ.. LSI OEM ַ ϱ ̱⵵ մϴ..

丮 ϸ鼭 ġ ° ̺Դϴ..

̰ ݵ Ϲ ̺ .. ý̳  Ʃ׵Ǿ  ̶ ʽϴ..

ǰ ̻ µ ӵ ȳ ̷ ȱ ̺ Դϴ..

http://www.raidmall.com/

ƴ ڿ ϴ θԴϴ..

ƴ ǰ ̺ ǰ ϴ..

Ϸ ǰ SAS ̺ ̴ϴ..

θ ݰ ̺ / ˸ ߰ ݰ ϸ Ͻ ̴ϴ..
               
hypothalamus 2022-10
մϴ٤ ̷ ƿ 𸣰־׿... ߰ μǰ ŷ ٶ󼭿..
                    
ڹ 2022-10
( ) 𸨴ϴ..
2022-10
Ǯ մϴ..
..

׸ ̵ մϴ.  RaidZ2

׷

̵ 6 ó ѵ..
ɰ ְԴϴ.

޸ ־ ǿ... ޸𸮸 Cache մϴ.
CPU ־ּ..
׷ Ŵ ̵ Ʈѷ ˴ϴ. (12ھ ּ.)
ü Ŵ ̵ Ʈѷ ŵ˴ϴ..

ó.. NTFS ̷ϰ ϸ ʵǿ..
͵ ϸ ʵ..
     
hypothalamus 2022-10
¾ƿ... Ϸ ˾ƺ ZFS ðԾٰ ذ ȴٸ ϽŰ ó մϴ
     
MOONL 2022-10
ñѰ ִµ..
2cpu zfs ۵鿡 iops ؼ raid10 ϴ° ٰ ϴµ...
1 Ǯ raidz2 1 ־ iops ???
ƴϸ 1 Ǯ raidz2 ִ° ??
     
dateno1 2022-10
Cache SSD NVMe 500Ⱑ ̻ (1׶ õ) 𵨷 2 ޾ָ

ƹ Ŀ SSDŭ 뷮 ޱ ɽ ̸
2022-10
̰

Sun Microsystem
zfs :: ŸϽý Դϴ.


Ethernet
10G ־ֽð. ..,.,.,
     
hypothalamus 2022-10
׷ θ ϴ 10g ȹԴϴ :)
          
ڹ 2022-10
10G ⺻ Դϴ..
2022-10
׷ ȰԴϴ.

 ~~ Action !! ~~
2022-10
׸
SATA ϵ 6G ɷ־ ʳ

SAS ؾ մϴ.
SAS 12Gbps ֽϴ.


QnA
Page 2298/5708
2015-12   1673817   ް
2014-05   5139323   1
2007-08   4639   ۱
2007-02   4639   ̻
2016-03   4639  
2020-07   4639  
2014-05   4639  
2014-10   4639  
2015-10   4639  
2018-03   4639   ֽÿ
2015-12   4639  
2006-09   4640   ߱
2016-04   4640   cpu
2006-03   4640   ѵ
2007-08   4640   ȣ
2008-09   4640   ȣ
2006-08   4640   ȫ
2017-08   4640   ǹ̡
2015-08   4640   Į
2016-09   4640   Won
2020-05   4640  
2015-06   4640   ۵