회사규모는 크지 않은데 점점 더 늘어나는 데이터와 이제 운영한지 3년이 조금 지나니
데이터에 대한 체계화를 시켜야 되겠다는 생각에 서버에 문외한이면서도 자꾸 서버욕심을 냅니다.
사내 서버를 구축하려는 용도는
1. 사내 파일서버
2. 사내 작업컴퓨터의 특정 폴더 백업(맥은 타임머신, 윈도우는 적당한 프로그램을 통한 백업) - 백업주기는 매일 1회
- 여기에 서버자원이 아주 많이 들것 같습니다.
- 여기에 서버자원이 아주 많이 들것 같습니다.
3. 사내 작업파일의 다중백업
3.1 가장 중요한 완료 파일은 R710에 1차적 보관 , 2차는 MD1200에 보관, 3차는 외부 별도 서버(ML110 G7 8TB) 보관 으로 생각하고 있습니다.
3.1 가장 중요한 완료 파일은 R710에 1차적 보관 , 2차는 MD1200에 보관, 3차는 외부 별도 서버(ML110 G7 8TB) 보관 으로 생각하고 있습니다.
아래와 같이 네트워크 구성은 만들었습니다.
그리고 R710은 이승훈님으로 부터 주문도 했습니다.
MD1200은 중고를 이래
저래 알아보고 있는 상황입니다.
제가 여쭙고 싶은 것은
1. 파일서버, 백업서버의 역할을 R710으로 충분할까요?(지금 현재 CPU는 하나만 주문했고, 램은 16G 정도 생각하고 있습니다)
2. 네트워크 속도를 개선 시키위해서는 꼭 필요한 장비는 무엇이 있을까요?
3. 운영체제는 적절할 까요?
- 운영체제는 FREEBSD, 파일시스템은 ZFS 로 생각하고 있습니다.
4. R710은 RAID 60으로 묶기위해서 필요한 장비는 무엇인가요? (4tb * 6ea = 24tb)- 이승훈님께서는 M5015를 추천하셨는데 장터에 통 보이질 않습니다 ㅠㅠ
5. MD1200을 (H 800과 함께 알아보고 있습니다) RAID 60으로 묶고 단일파티션으로 접근하기 위해서는 필요한 장비는 무엇인가?
6. 다루는 파일의 크기는 작업파일의 경우 4-50M, 수신되는 데이터 파일의 전체크기는 평균 3Gbyte
이 정도인데....
이 정도인데....
현업에서 맥 시스템을 사용하시면서 이런 고민을 해보신 분들은 없는지 궁금합니다!
조금이라도 비용을 줄여볼라고 하루에도 몇번씩 2cpu를 들락날락하고 있습니다!!
회원 여러분들의 고견을 기다립니다!
1, 충분합니다.
2, 데이터 양에 따라 달라지지만 기가 스위치면 충분
3, 운영체계가 큰 문제가 아니라 데이터 장애 시 대처 방법에 대한 숙지가 먼저 입니다.
4, R710 레이드 60 설정이라면 실제 가용량은 약 8테라 정도 입니다.
5, H800을 구매할 예정이라면 M5015보다 서드가 편할 것입니다.
6, MD1200 에서 레이드 60 설정이라면 가용량이 약 10 테라 정도 입니다.
추가로 여쭙는다면
1. 만약 하드를 스트라이드로 묶는다면 문제가 많이 생길까요?
2. 소프트웨어 레이드(zfsraid )로 묶을 때 뭐가 문제 될까요?
3. 언급하신 내용 중에 서드는 무언가요?
4. 별도의 레이드카드 없이 perc/6으로만 스트라이프 구성이 가능한가요?
3단 백업의 경우 솔직히 큰 의미는 없을 것 같구요.
m5015는 rare item이고 (거의 안나옵니다) adaptec 5805 정도로도 충분할 겁니다.
1대의 파일서버로 다 하려니 답 안나오는 것이고 2대로 가져가심이?
r710 + ml 110 g7 ...
지금 구성하신 것을 보면 강윤호님이 말씀하신 것처럼 MD1200은 별로 필요 없지 않을까 생각됩니다.
아마 이전에 쓰시다가 좋은 기억이 있으셔서 쓰시는 것 같은데 단순 2차 백업 용도면 너무 과분한 것 같습니다.
R710 사실 H700을 저렴하게 구할 수 있으면 가장 좋습니다만 잘 안나오는 편이라 그나마 잘나오고
좀 저렴한 M5015를 추천해 드렸습니다. 다만 레이드 6를 하시려면 설영수님이 말씀하신 것처럼
Advanced Key가 필요 합니다 보통 70불 정도 하는 것 같습니다.
M5015를 전에 장터에 나왔던 것처럼 15만원 정도에 구할 수 있으면 합쳐서 25만원 이내로 가능할 것
같아서 추천드렸습니다!
다만 최근에는 강윤호님 말씀처럼 M5015가 장터에서 레어템이 되어 가는 것 같습니다.
만약 H700을 저렴하게 구하실수 있으시면 H700이 더 좋습니다.
저도 집에 R720에 MD1200 달려 있는데...... (여분이 있긴 하지만 이 소음 때문에 엄두를 못내겠네요)
서버야 처음만 시끄럽지만 DAS는 줄창 풀로드 입니다
3테라 nlSAS 12 RAID 10으로 18테라 나옵니다 60이면 15테라겠네요
안써보셨다면 소음을 좀 보고 결정하시는게....
DAS이다 보니 시스템하고 같이 on/off 해야 하는데 아무래도 소음 문제가 상당할 듯 합니다
차라리 R720XD 등 처럼 전면에 3.5인치 12개 들어가는 서버 시스템을 갖추시는 게 어떨까 합니다만
안정성은 높아지겠으나 용량의 낭비가 과해보입니다.
MD1200 를 붙이는거 보다는 강윤호님의 언급대로 별도의 서버를 두는게 낫습니다.
R710이 죽었다고 가정할 경우 MD1200도 다시 다른 서버에 붙여야 데이터를 볼수 있을텐데
그것도 같은 벤더의 장비가 아니라면 붙이는게 수월하지 않을수 있습니다.
추가용 백업 서버는 ML110 G7 이나 HP 마이크로 서버 가지고도 충분해보입니다.
R710 및 추가 백업 서버는 같은 OS를 써서 똑같이 동작하도록 만들어 두면 됩니다.
cron + rsync 를 써서 똑같은 파일을 유지하도록 매일 동기화 시키면 되겠네요.
그런데 ML110에 4TB 하드 6개를 달수 있는 방법이 있나요?
여길 참고하시고요
http://2cpu.co.kr/bbs/board.php?bo_table=QnA&wr_id=389965&sca=&sfl=wr_subject&stx=zfs&sop=and
많은분들이 말씀하셨듯이 zfs는 문제 발생시 기술지원과 책임 문제가 큽니다.
(zfs를 사용하고 있지만 아직까지는 크리티컬한 문제는 경험 해 본적은 없습니다. 발생한다면 음....날려도 되는 데이터뿐이라 하하.. )
파일서버 R710 - H/W Raid 6(Dell H700 이나 ibm M5015)
백업서버 - JBOD 데이터백업
Iptime H5008 - 장터에 올라온 Dell 2848 가격이 좋더군요 ^^
+@ UPS까지
어떠신지요
허브 안에 케쉬램이 있어야 합니다.
그 외에 좋은 랜케이블이 에러가 적어 데이터가 시원시원하게 나갑니다.
DELL L2 기가스위치 혹은 HP L2 기가스위치 저렴하게 나오니 이걸로 바꾸신 후,
R710은 최소 듀얼, 넉넉히 쿼드 기가비트 랜카드 달아서 LACP로 묶으시는편이 매우 좋습니다.
3중백업까지 되어있다면 RAID60이 아니라 6으로도 충분합니다. 쓰기속도가 많이 필요할경우에는 RAID5+Hotspare1까지 고려해볼 수 있습니다..
<raid 6+0>은 최소 디스크가 8개 이상 있어야 하는 것이지요 ?
1. 디스크를 6개 사용하실 것이라면 <raid 6> 또는 <raid 5/5+0>을 사용할 수 있고, <raid 6>은
4개 x 4TB = 16TB 가용량이 됩니다(raid 5 = 20TB / raid 5+0 = 16TB).
2. 디스크 4개가 동시에 사용되므로 125MB/s x 4 = 500MB/s 이상의 raid 성능이 예상,
R710 서버의1GbE 쿼드 포트 티밍(bonding) 사용(또는 10GbE NIC를 추가 장착),
스위치는 LACP 지원하는(또는 10GbE 장착 시10GbE uplink를 가진) 것이 좋을 듯합니다.
3. 파일서버(R710)에서 백업서버(ML110G7)로의 복사속도를 위해 10GbE NIC를 크로스 연결합니다.
10GbE SFP+의 경우 twinax 케이블로 크로스 연결됩니다(확인필요).
10GbE TP는 직접 확인을 안해봐서...
* 아... 별도 외부서버라면 이부분은 생략입니다.
4. ML110의 중간 베이에 4개 + 5.25인치 2개 자리에 3.5" 3개 들어가는 하드랙을 장착하면 7개까지 장착이
가능해 보입니다.
* 네트워크는 파일서버에 연결된 스위치를 중심으로 구성합니다.
* ZFS S/W raid는 M1015(IT 모드)를 많이 사용하는 것 같습니다.
레이드 기능의 탄생 이유는
연속적인 서비스, 에러 정책에 대한 설계 입니다.
정책에 따라
스트라이트, ZFS, 레이드1, 레이드 5, 레이드 50, 레이드 60 이 탄생합니다.
연속적 서비스, 그리고 정책에 대한 고객사의 대응 할 수 있는 방법에 따라
선택하는 것입니다.
기초적인 고객사의 정보는 업무분석에 따라 결정 됩니다.
연속적인 서비스가 필요가 없는 경우
연속적인 서비스가 반드시 필요한 경우
고객사의 대응 한계에 따라
레이드 구성의 방법에 따라 달라진다고 생각하시면 됩니다.
레이드0 > 레이드 1> 레이드 10>레이드 5> 레이드 6> 레이드 50> 레이드 60
순으로
비용 과 운영방식의 안정성이 크게 됩니다.
또안 연속성이 커기는 결과가 됩니다.
비용과 효용에 대한 결과치를 비교 분석하여
고객사의 데이터 백업 시스템에 대한 설계를 하는 것이 정상입니다.
장애 후 하루안에
데이터를 복구 할 수 있다면
데이터의 무결성을 확보할 수 있다면
스페어 기능은 필요 없습니다.
레이드 구성의 방법 마다
탄생 이유가 존재 합니다.
근원적인 접근 입니다.
현재
본인이 다룰 수 있는 한계 내에서
다시 구성하시는 것이 나을 것이라 생각합니다.
지금 말씀 하시는 내용을 보면
백업에 대한 최소한의 안정 장치를 2단계는 하시는 것 같습니다.
다만 실시간으로 백업하기를 원하시는 것 같습니다.
본인이 다룰 수 없는 시스템으로 전환은
옳바른 데이터 백업은 아닐 것 입니다.
나의 한계를 벗어나는 것은
데이터의 보관이 아니라
제3자에 의한 보관입니다.
데이터 백업 시스템의 탄생 비화는
" 나 전산 담당자로 갔어. 회사 오래 다니고 싶은데 방법 없어?"
입니다.
끄덕끄덕 하고 글을 읽다가 마지막줄에 빵 터졌네요..
중형차 사려는데 페라리 카달로그를 뒤적거리는 것하고 비슷한 상황같습니다.
데이터의 안전을 위해선 백업만이 진리이긴 합니다만...
1차 백업이 너무 과하게 설정되어 있고..
백업 부하 계산을 다시 해보셔야 할 것 같습니다.
1차 백업을 가장 단순하고 기초적인 계산법으로 레이드60-구성이 가능한지 안한지를 떠나서-의 가용 용량을 계산해 보면 디스크 2개까지 용량이 줄어듭니다.
그리고, 각 PC에서 1차 백업 스토리지로 데이터를 이동하는 것이 1일 1회라면 지금의 구성에서 네트워크의 대역폭을 더 늘려야 할 필요성도 의문이 듭니다.
하루에 생성되는 데이터의 양이 PC당 수~수십 기가 급이라면 모르겠지만 말이죠.
네트워크/스토리지 구성도 이전에 근본이 되는 하루 데이터 생성량과 1차 백업 스토리지에 트래픽이 걸리는 시간/데이터 양을 산출 하는 것이 먼저일 듯 싶습니다.
그리고 데이터를 어느 수준까지 보관할 것인가... 하는 것도요..
서버에서 듀얼랜 티밍(본딩)은 필수입니다. 그것도 1~2TB가 아니라 수십TB 이상으로 올라가면....
때문에 서버보드도 기본으로 듀얼포트 기가비트를 채용해서 나오고 있습니다.
그런데 그건 매일 백업이 필요한 수준의 데이터 양이 PC당 3~4기가 일때의 얘기잖아요.
디자인 회사에서 PC한대당 매일 발생하는 백업 필요 데이터가 3~4기가라고는 생각이 안듭니다.
조금은 극단적인 예가 되겠습니다만..
소설가가 백업을 고려한다 했을 때.. 16베이 스토리지를 권하시겠습니까? 외장하드 2개를 권하시겠습니까?
소설가가 백업을 고려한다면 2베이 NAS를 권하고 외장하드에 2차 백업을 권하겠습니다.
저기처럼 4T 6개정도를 쓸 경우라면 데이터를 한번에 옮기거나 가져와야할 경우도 있을것이고, 그 이상의 부하가 앞으로 걸리지 않을거라 장담하기 힘들기때문에 다른분들께서 쿼드포트 이상을 권하시는것이죠.
더군다나 글쓴이분도 네트워크 속도 개선을 원하고 계시구요.
모두다 10G로 바꾸시면 좋겠지만 비용추가가 만만치않으실테니 부분부분 10G로 가시면 좋을듯합니다.
현실적으로는 10G업링크 2~4개 있는 기가빗스위치의 10G포트에 NAS와 백업을 물리면어떨까요.
그리고 ZFS도 언급하셨는데 가성비생각하면 백업용으로만 고려하셔도 아주 좋습니다.
램이 중요한데 최소 4기가 이상에 다다익선이구요, 10G랜카드 가격이 만만찮으니 메인보드 내장형(혹은 벤더)으로하시는것이 좀더 쌉니다.
저도 집에서 테스트해보다가 생각보다 만족스럽지는 않더라구요
비싼 RAID card 다 설치하고 ZFS 쓰겠다는 건 제가 봐서는 좀.....
성능도 성능이지만 문제 시 해결에 있어서는 아직은 무리가 아닐까 합니다
일단 iptime 제품부터 다 제거하시구요
cisco managed switch로 바꾸시구요
10GBe switch는 가격도 가격이지만 소비 전력 및 소음이 상당합니다
MD1200이 스위치 소음에 묻힙니다
물론 직장에서 쓰실 거니 좀 다르긴 하겠지만
일단은 10G 도입 보다는 기가빗을 LACP 등으로 묶는 게 나을 듯 합니다
ZFS는 메모리가 많을 수록 좋습니다