안녕하세요.
질문 좀 드립니다.1G 네트워크 환경에서 DAS와 분산파일시스템(GPFS,Luster,하둡) 차이점 알고싶습니다.
그리고 DAS(RAID5)는 서버 직접 불러와 데이터 I/O ( 280MB/s)이고
분산파일시스템 (GPFS 140MB/S ,Luster = 140MB/s,하둡 66MB/s ~ 100MB/s ) 이렇게 나오는데 이게 맞나요 ???
안녕하세요 반갑습니다
안녕하세요.
질문 좀 드립니다.1G 네트워크 환경에서 DAS와 분산파일시스템(GPFS,Luster,하둡) 차이점 알고싶습니다.
그리고 DAS(RAID5)는 서버 직접 불러와 데이터 I/O ( 280MB/s)이고
분산파일시스템 (GPFS 140MB/S ,Luster = 140MB/s,하둡 66MB/s ~ 100MB/s ) 이렇게 나오는데 이게 맞나요 ???
한 서버에서 속도는 SAS 제한인 12Gb/s 나올테고, 다른 서버에서는 네트워크 제한인 1Gb/s 까지 나옵니다.
Distributed FS는 여러 서버에서 쓸수 있지요. 속도는 네트워크 제한인 1Gb/s 까지 나올테고, 전체 속도는 서버 대수만큼 나올수 있을거구요.
근데 엄청 다른 케이스라 둘을 비교하는게 이상합니다. 보통 DAS/SAN/FC/ISCSI끼리 비교되고, GPFS/Lustre/Gluster/Ceph 끼리 비교되고, HDFS/GFS이랑 비교됩니다.
그리고 말씀하신 GPFS/Lustre는 제대로 설정하면 수GB/s도 나올수 있습니다. 다만 네트워크, 서버, 세팅 다 잘 하셔야 겠지요.
분산파일시스템은 결국 네트워크대역 I/O 비교할수있는데 DAS의 I/O는 네트워크대역으로하는것이 아니기 떄문인거 이게 맞죠 ????
만약 분산파일시스템과 비교할려면 DAS구성된 서버를 NFS로 하여 비교하는것 맞는거고요
내용 감사드립니다
https://www.areca.com.tw/products/storage-9200.html
저는 DAS하면 이런 방식의 스텐드 얼론 스토리지를 생각합니다..
단순하게 이야기 하면 하드디스크 50개가 있으며 한개의 데이터 파일을 50개에 분산저장처리하고 처리한 데이터에 대해서 50개 하드디스크에서
한번에 불러 올수 있다고 합니다. 일반서버에서 GPFS(IBM)/Lustre(오픈소스) 를 사용하기는 쉽지가 않을듯 합니다.