안녕하세요 연구실에서 운용할 NAS를 구축하려고하는데요 영상데이터들이 굉장히 많아 용량을 가능한 크게 잡아야 하는 상황입니다 지금까지는 제가 개인적으로 집에 구축한 헤놀로지 홈서버를 이용했었는데 이젠 규모가 커지고 운용에 어려움이 있어서 완전히 시스템을 상위버전으로 새로 구축하려고합니다
그런데 구축하려고보니 비용이 생각보다 만만치 않더라고요.... 저는 여기에 계속 있을 입장이아니라 처음에는 유지보수 쉽게 업체에서 서버를 주문하거나 클라우드를 쓰려니 가격이 상상초월이고 시놀로지나 Qnap등에서 나온 완제품 NAS를 사자니 이것도 가격대비 사양이 영 마음에 안들더라구요... 데이터크기가 크기인지라 내부망은 전부 10gbps로 구축해서 사용예정인데 아톰이나 셀러론정도로는... 제가 집에서 운영해보니 한명도 버거워하는게 보여서 집도 i3 10105를 올려서 쓰고있는 상황이거든요
그래서 생각을 해보니 구축만되고 초반 트러블슈팅과정만 거치면 향후 운용에는 큰 지식이없어도 운영이 가능한것 같더라구요 그래서 완전히 부품들을 다 사서 자체적으로 구축을 하려고하는데요 제계획은 i5 + 64gb 램에 메인보드 sata8개 되는걸 구비해서 16TB 8개를 꽂고 M.2 SSD 들을 추가해 캐시및 os디스크로 활용할 계획이였습니다 OS는 트루나스올릴 계획이였구요
그런데 문제가....제가 헤놀로지랑 공유기정도만 해보고 트루나스는 처음으로 시도하는거라 어떻게 구성이 될지 감이 안잡혀서요 ZFS는 레이드가 어떻게 구성이되나요? 위 내용처럼 총 128TB구성을하면 실제로 활용할수있는 공간이 어느정도로 잡히게 되는건가요?
그리고 원래 서버부품들을 쓰려다가 가성비가 영엉망이라 일반 데스크탑 제품들로 꾸리려니 sata포트가 좀 모자란 감이없잖아 있더라구요...앞으로 데이터가 계속 늘어날거라 확장도해야되고 기본적인 용량도 최대한 많이 쌓아놔야하는데 pcie에 sata확장카드를 붙이려니 안정성과 성능이 의심되고... sas레이드카드를 꽂으려니 호환이 되는건지 모르겠습니다...운용경험도없고..ㅠ 그래서 어차피 케이스도 일반 데스크탑 케이스 (T900)을 활용할계획이라 하드 낑겨넣어봐야 10개이니 외부에 DAS로 썬더볼트 연결을 시키는것도 생각을 하고있는데 이런경우는 OS에서 어떻게 인식하는지도 잘모르고... 어떻게 하면 좋을까요?
그리고...무엇보다... 위 내용처럼 자체적으로 제작해서 굴렸을때 흠....문제가 생길일이 많을까요?... ㅠ 제가 일단 자체제작으로 질문을 드리긴했지만 자체제작이아니여도되니 100TB~이상급의 스토리지 서버를 구축할수있는 방법이 있다면 알려주시면 정말 감사합니다!
߿Ͻø ǰ մϴ κе ϱ ̰ŵ
忡 ó 躸(?) Դϴ
ȸ簡 ؾ , ʹ δٰ ؼ ٰ ؾ Ȳ ƴմϴ.
߿ ξ " å" ˴ϴ.
ǰ̳
丮 EMC /NetApp ǰ ֽϴ..
ū ̳ մϴ..
..
丮 Ͻôµ ̽ Ͻ ٸ ϸ 丮 ϼž ϳ..
丮 DAS /NAS /SAN ũ зմϴ..
̷ Ͻô±..
ƮƮũ ȸ翡 غ..
100G Ʈ 丮 뷮 ֽϴ..
ī带 Ἥ ũ ȮҲ ַ ؼ ȣȯǴ Ȯؼ ּ
Ʈ Ǵ OS ǹǷ Ǵ Ĩ ݵ Ȯּ (ű ǻ Ʈ Ƿ ϴ) ( ϴ° غ)
ϼ̴ٸ ʿ ī带 ϰ, ʿ Ȯ强 NIC Ȯ强 ʿ PCIe Lane Ȯؼ ؼ 带 Ͻð, ʿ ɰ ȣȯǴ ǻ ּ
ǻ, , ũ, Ȯī, Ŀ, ̽ 뷮 ̰ ؼ ּ (߿ Ȯ Ǵ κ̴ ϸ鼭 ص ˴ϴ)
ϰ غôµ ۾ ƴϹǷ ұԸ Ұ ƴ϶ ׳ ° ؿ
ü ̶ ƹ , ̶Դϴ
Storage ؼ ũ Ƽ ϸ ϴ°ͺ ΰ ϴ
Ͻñ⸦ մϴ..
ٸ Cache NVMe + ũ Ȯī + 10Ⱑ ſ Ƿ Z + iδ ɲϴ ( Ȱ ͽƮ غ)
ϵũ ..
x8 2 ũ Ȯ ī ɾƹ, x4 NVMe-PCIe ȯ ȣ 10G ٰ ĵ x4 1 ˴ϴ
CPU ű ʿ䰡 µ (i7 մϴ), PCIe Lane
10Ⱑ ϰ, NVMe ɰ, RAID 2 νƮ ǿ
CPU 1 (x8) : 10G
CPU 2 (x8) : RAID
CPU 3 (NVMe) : NVMe
PCH 1 (NVMe) : NVMe
̷ ǰڳ ( ġ 100% 뿪 ° ƴϴ PCH Կ ֽϴ)
CPU 1 NVMe 2 , CPU 3 NVMe-PCIe ȯϰų, PCH Ȯ Կ 10G Ȯϰ ҴѴٴ ֽϴ (CPU 20/PCH 4 ߺ Ҵϴ°Ŵ ֽϴ)
Ȯī ٽDz Ȯī带 CPU Lane PCHüٵ 뿪 ʿ ũ ɾּ
º 8 Ƹ 6 PCH ⺻ ̰, 2 ASMedia Ĩ Ἥ øų, PCIe ٿ ߰ 뿪 Ȯؼ øɲϴ (ڰ )
ߺ ҷ x16 뿪 8/4/4 NVMe 2 ( )ϴ ؾ߰ڳ
Host OS ũ ߿ ƹ SATA Ʈ SSD 2 ɾƼ RAID1̶ صμ
ƴϸ Ǯ ÷ 丮 ַ Ǿ ..
100TB 伥 ϳϳ ??
ƴϸ ̳ / ø ECC ˴ϴ
߿䵵 ڷḦ ٷ겨 ZFS ECC õǰ, ZFS ECC ϰ õǴ ֽϴ
̾ UPS ٰܴ ĵ Ϲ ž Ŀ 2,3ȭ ϱ ϱ
ATX Ŀ ϵ ٴ° Ѱ谡 ־ ..
Ʈ Ŀ ۿ ϴ..
745 /747 ̽ ϸ ( ̽ ʽϴ..) ֽ 8 ַ Ʈ ý մϴ..
PC ¦̳ ¦ DAS 丮 ̴ մϴ..
PC DAS 丮 ȭ ϴϱ..
ܴ 丮 ϰ..
͵ Ϲ PC 麸ٴ ֱ ƴ Դϴ..
ְ..
100 10 ɱ ׳ ATX ƼҲϴ (12V ߶ нϰ, 5V 10 Ե ɲϴ)
̽ Ŀ ǰ ̽ ɷ ϰ, ũ ܺη SASɷ Ҳ
10G 40G Ʈũ Ѵٸ ɵ ʰ 뷮 ũ ֳĿ ֱ...
Ŀε ϳ UPS ް ϳ ϰ ϸ ȣ ɰ .
Ʈ̵ бij ־ IO ־ ũ Ͽ δ ٴ ֽϴ.
ϵ ̵ó RAID5(RAIDZ) ϸ ȵǰ 1+0 Ȯϸ ؾ ̰ ӵ ϴ.(Ʈ̵ 1+0)
¼ֶ ZFS Դµ Ȯ TrueNAS ϴ.
TrueNAS ߸ ϸ 丮 Ⱥηϴ.
R730xd 18 Ǯ ä 10 ϸ 90TB ð . ũ SAS.
TrueNAS ϴ° ̸ ȣȯ ̽ ؼ .
ص 츮 ϵ ű⼭ ƶ մϴ..
MOQ ֱ ּ1000 ȳɴϴ..
ϴٰ ؿ RMA ϴµ ̰ ŷ ۺ ˾ƾ ֽϴ..
RMA Ⱓ 뷫 2 ̻ ɸ̴ϴ.. ٵ Ƽ..RMA ؼ Ƶ ݴϴ.. ļ ..
ϵ ̸ ٳͳ θ ϴ° ׳ ΰ ̸ ̳ ϵ ƾ մϴ..
ȯ Ƹ ö ̴ϴ..
100TB غ ϵ 10 ȵ˴ϴ
ް ʿϽø ǿ غø 帱̴ϴ
ðƮ Կ : ǾƮ
WD ( Ÿġ ) Կ :
ܵ ȸ ֱ մϴ..
θ ǻ̳ ׳ մϴ..
εϵ ǰ ϵ Ǹ ϸ 꼭 ൵ մϴ..
ϴ
12V ַ ÷ µ ǰ 5V ַ ȸΰ ϴµ ˴ϴ..
ٳͿ ̴ Ϲ ATX Ŀ 5V /3.3V 25A κ̰ ְ ϵ带 30A Ǿ ϴµ
̷ Ŀ ǰ ݵ Դϴ..
15 ص 5V/3.3V 30A Ŀ Ծµ GPU ߴ ʾƼ 12V ʾҴ
Ŀ ڿ GPU CPU 12V â Ŀ 5V/3.3V 뷮 ۾ϴ..
ǻʹ Ŀ 뷮 ˳ؾ Ż մϴ..
Ŀ ȸ ǰ ܿ ʽϴٸ..( Ŀ Ϲ 忡 ϴ..)
Ѵٰ ϴ Ŀ ϰ ..
ecc issue Ʒ ϼ.
https://www.truenas.com/community/threads/ecc-vs-non-ecc-ram-and-zfs.15449/
HA.... Ǹ غ (ִ 1 ־ ϴ þ)
HDD ǰ ż ߽ø õ մϴ.
б Ʈ Ǵ° Ƽ մϴ.
б ȳ ȳɴϴ..
Ư ߰ ȳ ˰ ֽϴ..
̵ SAS ̺ ݵ ˴ϴ..
LSI ǰ Ĵ ϴ.. LSI OEM ַ ϱ ̱ մϴ..
丮 ϸ鼭 ġ ° ̺Դϴ..
̰ ݵ Ϲ ̺ .. ý̳ ƩǾ ̶ ʽϴ..
ǰ ̻ µ ӵ ȳ ̷ ȱ ̺ Դϴ..
http://www.raidmall.com/
ƴ ڿ ϴ θԴϴ..
ƴ ǰ ̺ ǰ ϴ..
Ϸ ǰ SAS ̺ ̴ϴ..
θ ݰ ̺ / ˸ ߰ ݰ ϸ Ͻ ̴ϴ..
..
̵ մϴ. RaidZ2
̵ 6 ó ѵ..
ɰ ְԴϴ.
־ ǿ... Cache մϴ.
CPU ־ּ..
Ŵ ̵ Ʈѷ ˴ϴ. (12ھ ּ.)
ü Ŵ ̵ Ʈѷ ŵ˴ϴ..
ó.. NTFS ̷ϰ ϸ ʵǿ..
͵ ϸ ʵ..
2cpu zfs ۵鿡 iops ؼ raid10 ϴ° ٰ ϴµ...
1 Ǯ raidz2 1 ־ iops ???
ƴϸ 1 Ǯ raidz2 ִ° ??
ƹ Ŀ SSDŭ 뷮 ޱ ɽ ̸
Sun Microsystem
zfs :: ŸϽý Դϴ.
Ethernet
10G ־ֽð. ..,.,.,
~~ Action !! ~~
SATA ϵ 6G ɷ־ ʳ
SAS ؾ մϴ.
SAS 12Gbps ֽϴ.