백업 시스템으로 최대 속도로 백업하려면?

프랑   
   조회 2231   추천 0    

 안녕하세요.

백업용 NAS를 구매 예정입니다.

궁금한게, 백업 시간을 단축하기 위해서 이거저거 좀 알아보고 있는데, 정확히 이거 계산을 어떻게 해야하나??

서버 >> NAS 서버에서 NAS 장비로 복사를 할건데, 하드디스크 속도, 케이블 전송속도, NAS 처리 속도, NAS 하드디스크 속도 등등 고려할게 너무 많은데,,

이럴때 보통 확인해야 할까요??
짧은글 일수록 신중하게.
박문형 2021-11
보통 숫자로는 계산이 안되고 직접 시스템 구축해서 돌려봐야 됩니다..

돌려보고 문제 생기면 개선하고 하는 방식으로 가야 할 것입니다..
     
프랑 2021-11
네네, 그건 맞는데 이론적으로 어느정도까지 속도 뽑을수 있나가 궁금해서요,,
          
엠브리오 2021-11
직접 해보지 않고 그걸 정확히 알수 있는 정도라면,  초고수 입니다. ㅎㅎ
               
프랑 2021-11
아 그렇죠,, ㅋㅋㅋㅋ 음 어떻게 장비를 구매해야할지 모르겠내요
                    
박문형 2021-11
오픈이 가능하시다면

현재 컴퓨터/네트워크/스토리지 상황은 어떠하며 무슨 작업을 하는지 작업 내용이 무엇인지 알면 도움이 될 수 있습니다..
                         
프랑 2021-11
서버는  PowerEdge T430/현재 1Gbps (추후 상황에 따라 업그레이드 예정)/스토리지 서버마다 다르지만 4T * 6 (레이드 6)
서버에서 nas로 백업 예정입니다.,
                         
박문형 2021-11
만일 운용하지 않는 노는 장비가 있다면 거기에 HDD 달고 백업소프트 셋팅하고 해서 1G 베이스로 테스트 운영을

어느 기간 정도 해보세요..

거기서 경험을 얻으시고 어떤 장비를 더 늘릴지 고민해보는 것이 좋아 보입니다..
박문형 2021-11
잘은 모르지만 개인적으로 보기에는 10G 네트워크 환경에서 1:1로 연결했을때 그냥 일반적인 카피로는 절반 속도인 5G 나오면 잘 나온다라고 생각합니다..

그 외 속도를 올리려면 전용 백업 소프트웨어나 멜라녹스 이더넷 장비나 그런게 필요할 듯합니다..

NAS는 중간에 파일을 이더넷 패킷으로 바꾸는 소프트웨어가 들어가기에 그 소프트웨어가 얼마나 퍼포먼스를 덜 까먹느냐가 중요합니다..

그리고 12G LSI 3108 칩셋 베이스 RAID 장비에서 하드 100개 정도 설치되고 묶어서 돌리면 대략 5,000~6,000MB/s 정도의 속도가 최대입니다..

https://www.areca.com.tw/products/storage-9200.html

그 이상의 속도를 내는 장비는 플래쉬 기반 RAID 장비라고 보셔야 합니다..
     
엠브리오 2021-11
그냥 해당 장비에 고용량 HDD 추가로 달고 복사하는 것이 제일 빠른 방법이죠.

네트워크 카드를 거치는 순간 TCP/IP 라는걸 통해야 되기 때문에 속도를 잡아먹습니다.
박문형 2021-11
+100

그렇긴 합니다만 데이터 크기가 커져 버리면 장비에 하드 추가하고 데이터를 직접 카피하는 것도 큰일입니다..

장비 고장낼 수도 있고요..

그런 면에서는 네트워크를 사용하는 것이 느려도 안전하고 편리할 수 있습니다..
     
엠브리오 2021-11
제일 큰 문제점은 추가로 HDD를 장착할 포트가 없는 경우가 많다는게..
dateno1 2021-11
1G NIC를 쓰는 순간 이게 속도 한도 정하겠네요
박문형 2021-11
+100

10G도 동작시 CPU에 은근히 부하를 주기에 10G 단다고 해서 무조건 빠르다라고 말하지 못합니다..

100G는 보통 인텔 스케일러블이나 AMD EPYC 부터 설치가 가능하다고 봐야 합니다..

정상 서비스 잘 되면서 백업이 가능한가가 중요하겠죠..
     
SiCMOS 2021-11
샌디브릿지 E cpu 정도로 10G 충분히 구동합니다.
X520-DA2 장착하고 iperf3 테스트 했을 때 1코어 50%정도 사용하는 것으로 확인했었구요
속도는 7Gbps~11.5Gbps 정도로 충분히 나옵니다.
최신 cpu면 펜티엄 정도로도 충분할것으로 생각합니다.
100G부터는 테스트가 필요하겠지만 40G 정도는 4코어 i5 6600 으로 테스트해본 경험으로 충분히 오프로드하고 남습니다.
맑은여름 2021-11
일반하드 4T * 6개를 레이드6으로 구성하셨다고 하면 1G 망이나 10G 망이나 크게 다를바 없으실겁니다.
자잘한 파일이 많다고 가정시 1T 풀백업시 3~3시간30분 정도 잡으셔야 할겁니다.
SSD로 양쪽 모두 구축하시지 않는다면 10G 망도 소용이 없더라구요..
     
프랑 2021-11
이게 일반 하드 속도랑 레이드로 묶을때 속도랑 차이가 있나요?
          
맑은여름 2021-11
지난 제 글과 댓글을 보시면 이해 되실겁니다.
제온프로 2021-11
만 4T * 6 = Raid 6 인 서버의 고속백업 방법

서버가 낼수 있는 최고 전송 속도는 400~600 MB/s (아주 좋은 하드라는 전제하예.. 최신 SAS 12G 하드겠죠..)
이 속도를 다 받아주면 됩니다..
당연히 10G로 해야겠죠.. (서버와 백업서버 모두 10G 로 무장해야 하겠죠..)
가장 빠른 전송 프로토콜은 FTP 이구요...      (FTP 서버 와 클라이언트 구성하면됩니다..)

줄수 있는 속도가 나와 있고 받을 수 있는 백업서버는 이 보다 빨라야겠죠..

대략 서버의 필요한 구성은...
10G Ethernet
SAS 4TB x 8EA  Raid 5
     
프랑 2021-11
혹시 레이드 구성할때에 속도차이가 있나요?? 계산법이나?? 보통 SATA 기반 하드가 7,200 RPM 기분해서 잘뽑으면 250MB/S 나오는거 같던데 가령 뭐 레이드 묶을떄는 얼마로 계산한다더라,,,
          
제온프로 2021-11
250MB/S 이렇게나 많이 나오나요?
레이드 계산할 때..
당연 Enterprise 급으로 계산하고 100~150MB/S 정도로 대략 계산합니다.
               
프랑 2021-11
250MB/s 아 그죠 이건 이제 스펙상 풀로드이긴 합니다.
박문형 2021-11
3.5인치 7200rpm에서 250MB 면 피크치입니다..

100MB 정도로 계산해야 할 것입니다..

4TB 6개라고 하셨으니

이론치로는 RAID0 일때 100MB x 6 ea = 600MB

RAID 5나 6 는 페리티 계산이 들어가기에 RAID0 보다 속도가 처집니다..

대략 RAID 5나 6에 70% 정도 생각하면 420MB

420MB / s 정도 나오네요..

밴치마크 프로그램으로 속도 재보아서 비교해보세요..
     
프랑 2021-11
혹시 그러면 한쪽은 하드디스크 구성인데, 반대쪽 백업 받는곳이 SSD 구성이면 어차피 의미가 별로 없는거죠?
박문형 2021-11
네

그렇게 되면 1대 1로 연결시(네트워크에서 다른 부하가 간섭하지 않을시) 재일 느리게 동작하는 곳의 최대 스피드가 그 백업 프로세서 에서의

최대치로 봐야 합니다..

하드디스크나 SSD 속도가 문제가 될 수도 있겠지만 NAS 인지라 데이터 변환될 때 느려지면 그것도 문제입니다..
로그인 하시면 댓글을 남길 수 있습니다


QnA
쓰기
제목Page 584/5679
2014-05   4942397   1 정은준1
2015-12   1479220   1  백메가
2020-10   2229   1 겨울나무
2023-05   2229   1 미담
2021-04   2230   1 프랑
2023-02   2230   1 신은왜
2021-04   2230   1 트니아빠
2019-02   2230   1 허인구마틴
2020-08   2230   1 만전
2021-04   2230   1 lazarus
2022-05   2230   1 kmw24
2019-09   2230   1 헬로우
2020-11   2230   1 audacity
2020-10   2230   1 pibang
2022-12   2231   1 나로와
2019-01   2231   1 김제연
2021-08   2231   1 유낙선
2021-11   2231   1 mjk0401
2019-09   2231   1  최동민
01-19   2231   1 화란
2021-07   2231   1 AMD빌런
2023-08   2231   1 kino0924
목록
쓰기