현재 서버 구성이 그림 1번 처럼 되어있습니다. SAN 스위치를 사용할 정도로 서버가 많지도 않고, 더욱이 돈도 없기 때문에 NFS로 서로 다른 storage를 연결해서 사용하고 있습니다, 문제는 저렇게 nfs로 사용하니깐 대역폭이 1Gbps라서 프로그램이 돌다가 죽어버립니다, 제 생각은 IO로드가 너무 심해서 죽는거 같습니다. 그래서 SAN은 너무 비싸고.... 어떻게 할까 생각하다가 생각난게 대역폭을 늘리면 되지 않을까라고 생각을 했습니다, 그래서 여러가지 알아보다가 bonding이라는것도 봤는데, 그냥 10Gpbs 랜카드 쓰면 해결되지 않을까 생각했습니다. 더욱이 서버가 1대 더 추가 될 상황이라 10Gbps 스위치를 구매해서 그림 2번처럼 서버를 구성하려고 합니다. 고수님들 이렇게 구성해도 문제 없을까요??? 고수님들 많은 가르침 부탁드립니다.
추가) 스위치는 넷기어 XS508M을 사려고 합니다. 이 스위치 괜찮을까요?
서버를 몇 대나 늘릴 계획이신지요?? 그것에 따라 스윗치의 포트수를 결정해야 합니다..
저기 쓰이는 DAS가 10G iSCSI가 지원되나요??
그렇게 되면 10G 스윗치에 다이랙트로 붙을수 있을 듯합니다..
(보통 10G 스위치라면 iSCSI를 지원합니다..)
장비들의 자세한 모델명이나 스팩이 부족하니 오픈 가능하시면 오픈해보시기 바랍니다..
스토리지는 업체한테 맡긴거라 HBA카드로 광케이블로 연결되어있고 이중화 했다는 정도 밖에 모릅니다.
모델명은 견적서에 있는것으로 보내드립니다.
서버: HP DL380p X 2
스토리지: ProAVio DS316F8 Single Controller upgradable - SATA Disks - Proavio - SAN App, Infortrend EonStor DS 1000 2U 12-Bay Entry hybrid SAN Storage
그리고 이중화는 안되었을 듯합니다..(실물을 봐야 합니다..)
FC 인터페이스가 공유가 안되니까 서버를 붙여서 NFS로 바꾸는 것은 이해가 됩니다..
그리고 서버에는 FC HBA 의 포트가 허용되는 만큼 FC 스토리지를 여러대 붙일수도 있고 FC스토리지마다 확장 박스를 달아서 하드 갯수도 늘릴수 있을 것입니다..
외장 스토리지를 단다는 것은 돈이 있어야 할 수 있는 것인데..
근데 용도가 무엇인가요??
스토리지 콘트롤러 이중화 해서 한 서버에 끊기지 말고 계속 서비스 하게 한다는 것은 몬가 중요한 작업이 있다는 것인데요..
개인적으로 생각에는 4K 영상 편집용으로는 스팩이 겨우 정도로 판단됩니다..
http://www.scsi4me.com/proavio-ds316f8-sf32t-ds-system-3u-rm-16-bay-32tb-16x2tb-4-port-8g-fc.html
요기 보시면 RAID 5 에서 1800MB/s 정도라고 나오네요..
각 서버마다 HBA카드가 2개 달려있습니다, HBA는 포트가 2개 있어서 이중화해서 사용하고 있습니다. 그리고 ProAVio의 경우는 박스 연장해서 사용중입니다. 그래서 박스만 보면 스토리지는 3개입니다.
현재 학교 개별 실험실에서 데이터 저장용으로 스토리지를 사용하고 있습니다. 그런데 본문처럼 NFS를 사용해서 프로그램을 돌리다보면 죽는다는게 문제입니다. 서버 두대를 스토리지 구분없이 쓰고싶은 욕심에 계속 찾아보고 있네요.
프로그램이 스토리지 I/O 퍼포먼스를 엄청 원하는 듯한데 (거기에 용량도) 이건 장비 영역이라기 보다는 솔류션 영역으로 가야합니다..
우선 프로그램이 1대의 서버에서도 안 죽게 셋팅하는게 문제일 듯하네요..
제 짧은 생각으로는 FC채널로 묶어서 사용하면 250MB/s 정도 나와서 10Gbps 랜카트로 해결될것이라고 생각이 들거든요...
의견 부탁드립니다.
------------------------------------------------------------------------------------------------------------------------------
위에 글을 다시 보니 약간의 오해가 있는듯 합니다.
그림1을 보면 서버1에 스토리지 1이 fc로 연결 서버2 에 스토리지 2가 묶여있습니다.
서버1에서 스토리지1에 접근해서 프로그램 돌리면 잘 돌아기지만, 서버1에서 스토리지2를 서버2를 통해서 nfs로 사욜해서 프로그램돌리면 프로그램이 돌아가다가 죽습니다.
NFS 가 공유가 되기는 하지만 변환 퍼포먼스가 안좋아서 높은 퍼포먼스를 내는데에는 한계가 있다라고 생각합니다..
잘 아시겠지만 10G 랜카드는 10G bit/s 의 대역폭을 지원하지 프로그램 돌린다고 10G bit/s 의 속도를 내는 것은 아닙니다..
그림 1에서 서버 1과 서버 2 사이를 10G로 만들고 iSCSI로 연결해 보세요..
iSCSI는 인터넷 스커지의 약자이고 스토리지와 같은 블럭 방식으로 데이터를 전송하니 (전송 통로만 이더넷) 퍼포먼스 올리는 데는 좋을 것입니다..
그러나 공유는 될 지 의문이네요..
서버 1에 다이렉트로 물린 스토리지 1에서 보통 데이터 이동해서 속도 확인해보면 250MB/s 정도 나오기 때문에 저 정도 대역폭이 지원되면 NFS로 물려도 문제없지 않을까 하는 안일한 생각을 했네여 ㅎㅎㅎ
좋은 말씀 감사드립니다.
제가 약 20년전 댕기던 국내 회사에서 요즘 저런 솔류션을 하기에 대략 가닥만 보고 있습니다..
근데 보통 천만원이 넘어가니... 그 정도까지 할 상황이 아니라서 엄두도 못 내고 있습니다 ㅋㅋㅋ
어떤 프로그램도 1g Nfs 때문에 죽진 않습니다.
저도 처음에는 죽을 일이 없다고 생각했는데, 아무리 생각해도 IO 로드 말고는 설명이 안되네요
openfile 리밋 설정에 걸린건 아닐까 의심이 드네요...
10기가포트 끝에 정확히 2개 뿐이 없습니다.
나머지포트들은 좀 2.5G , 5G 까지만 지원된다 라고 되어있어요
성능은 이게 낫네요