DAS와 분산파일시스템(GPFS,Luster,하둡) 차이점

bangCH   
   조회 4346   추천 0    

 안녕하세요. 

질문 좀 드립니다.1G 네트워크 환경에서 DAS와 분산파일시스템(GPFS,Luster,하둡) 차이점  알고싶습니다. 


그리고 DAS(RAID5)는 서버 직접 불러와 데이터 I/O ( 280MB/s)이고

분산파일시스템 (GPFS 140MB/S ,Luster = 140MB/s,하둡 66MB/s ~ 100MB/s ) 이렇게 나오는데 이게 맞나요 ???

안녕하세요 반갑습니다
짧은글 일수록 신중하게.
언젠가는 2021-05
DAS는 한 서버에서만 쓸수 있고, 다른 서버에서 쓰려면 NFS 같은 프로토콜로 접속 가능하게 해야하지요.
한 서버에서 속도는 SAS 제한인 12Gb/s 나올테고, 다른 서버에서는 네트워크 제한인 1Gb/s 까지 나옵니다.
Distributed FS는 여러 서버에서 쓸수 있지요. 속도는 네트워크 제한인 1Gb/s 까지 나올테고, 전체 속도는 서버 대수만큼 나올수 있을거구요.

근데 엄청 다른 케이스라 둘을 비교하는게 이상합니다. 보통 DAS/SAN/FC/ISCSI끼리 비교되고, GPFS/Lustre/Gluster/Ceph 끼리 비교되고, HDFS/GFS이랑 비교됩니다.

그리고 말씀하신 GPFS/Lustre는 제대로 설정하면 수GB/s도 나올수 있습니다. 다만 네트워크, 서버, 세팅 다 잘 하셔야 겠지요.
     
bangCH 2021-05
음... DAS랑 분산파일시스템이랑 비교하는건 안맞는다구는요....
분산파일시스템은 결국 네트워크대역 I/O 비교할수있는데 DAS의 I/O는 네트워크대역으로하는것이 아니기 떄문인거 이게 맞죠 ????

만약 분산파일시스템과 비교할려면 DAS구성된 서버를 NFS로 하여 비교하는것 맞는거고요
내용 감사드립니다
듀학 2021-05
보통 스토리지 붙으면 FC 8Gbps/16Gbps Ether 10Gbit/40Gbit/100Gbit 으로 올라갑니다. 확장면에서 NAS 쪽이 유리하기는 합니다.
박문형 2021-05
DAS에 사용되는 레이드 콘트롤러는 무엇을 사용하셨나요??
     
bangCH 2021-05
브로드컴 3108로만 알고있습니다
          
박문형 2021-05
네 캐쉬 메모리 달린 1세대 12G급 레이드 카드네요..

https://www.areca.com.tw/products/storage-9200.html

저는 DAS하면 이런 방식의 스텐드 얼론 스토리지를 생각합니다..
용이222 2021-05
GPFS는 슈퍼컴퓨터에서 많이 쓰는 IBM에서 쓰는 파일시스템으로 RAID 개념이 아닌 여러개의 하드디스크를 한번에 쓰는 방식입니다.
단순하게 이야기 하면 하드디스크 50개가 있으며 한개의 데이터 파일을 50개에 분산저장처리하고 처리한 데이터에 대해서 50개 하드디스크에서
한번에 불러 올수 있다고 합니다. 일반서버에서 GPFS(IBM)/Lustre(오픈소스) 를 사용하기는 쉽지가 않을듯 합니다.
     
bangCH 2021-05
gpfs개념을 다시 알아봐야겠네요 감사합니다


QnA
제목Page 4107/5710
2014-05   5159292   정은준1
2015-12   1693553   백메가
2014-02   3984   Windows10
2016-01   3984   김건우
2014-06   3984   방o효o문
2014-02   3984   권희석
2015-07   3984   2CPU최주희
2016-12   3984   동행큐브
2018-11   3984   newretrowave
2019-05   3984   파워가터져욧
2016-07   3984   FullMoon
2014-03   3984   라클린
2017-11   3984   초보IT
2017-11   3984   쁘삐
2014-10   3984   늑대천랑성
2018-03   3984   Dishy
2018-06   3984   김준유
2016-02   3984   Midabo
2018-04   3984   Nikon
2014-03   3984   chis
2017-11   3984   다봉이
2022-04   3984   VSPress