제목에 제시한 것보다 좀 많이 물어보게 될 것 같습니다. 조언 부탁드립니다.
개발팀에 (100명쯤) 빌드 결과물을 배포하기 위한 파일서버가 필요해서 아래와 같이 장비를 준비했습니다.
[장비 내용]
Dell R510, Xeon E5620 2.4 GHz(2개), RAM 24기가. HDD SAS 600GB X 10개 (RAID 5 구성), 기가빗 포트 두 개(기본), 사내망은 기가빗
주로 작업하는 것은 3기가 정도 되는 빌드 결과물을 하나의 파일로 압축해서 매일 배포를 하면, 100명정도 되는 개발자들이 가져다 쓰는 정도입니다. 이전에 속도가 너무 느려서 이번에 마음먹고 시스템을 꾸몄는데 CPU가 오버스팩으로 느껴지기는 하지만(파일서버이자 다른 용도로 사용하시자는 의견이 조금 있어서) 의견이 분분해서 이렇게 만들었습니다.
금요일날 아래와 같이 작업을 했는데요
- Perc H700 에서 10개의 SAS 하드를 RAID 5로 묶었습니다. (하나의 logical volume)
- Dell 빌드 CD로 부팅해서 회사에 라이센스가 있는 Windows server 2008 enterprise 64bit 에디션을 설치
- 볼륨이 두 개로 잡힘 (2TB + 3TB)
저는 편의상 볼륨을 하나로 잡고 파티션만 시스템(100GB)이랑 데이터로 나눠서 하려고 했는데 왜 볼륨이 두 개로 잡히는지 모르겠더라구요. 64bit OS이고 H700에서 단일 볼륨으로 잡았는데 말이지요. 혹시 2008 R2가 아니여서 그런가요? (이것도 라이센스가 있다고 해서 월요일날 R2로 해보려고 합니다.)
혹시 저렇게 잡히는게 정상이라면 하나의 드라이브로 잡아서 사용할 수 있는 방법은 어떤게 있을까요? (데이터를 하나의 드라이브로 잡으려고 함) 의견 부탁드립니다.
덧. 더불어 아래와 같은 고민들이 생기는데 의견 주시면 감사하겠습니다.
- 100명에서 150명 정도 매일 파일을 끌어가는데 (주로 3기가쯤 하는 파일) SAS하드 대신 SATA를 써서 RAID 5 구성을 하면 체감성능에 차이가 있을까?
- 파일서버에 RAM이 많으면 좋다고 하는데 우리와 같은 경우 어느정도의 RAM이면 좋을까?
- 파일서버 고를때 CPU는 어느정도면 되는가? (이 부분이 의견이 상당히 분분했음)
- 추후 확장시 남은 HDD 슬롯이 2개 뿐인데, 시스템에 있는 동일한 하드를 두 개 사서 붙이면 데이터 손실 없이 바로 12개의 하드를 RAID5로 재구성 가능한가?
- 12개 꽉 채우고 나서는 어떤식으로 확장을 하는게 좋을까? (DAS를 붙인다? 아니면 지금과 같은 HDD슬롯 12개짜리 시스템을 사서 1테라 SATA하드를 꽉 채운다.)
- 32비트 엔터프라이즈라서 24기가 꼽아서 사용해도 64비트 엔터프라이즈 사용할때랑 차이 없다고 하는데(모 업체분이 그렇게 이야기함) 정말 그런가?
그동안 궁금하다고 생각한것들을 주욱 적어봤습니다. 너무 많아서 죄송하네요. 의견 부탁드립니다~
부팅디스크 + 레이드
부팅디스크 (미러링) + 레이드
를 사용합니다.
SATA하드는 7200 rpm입니다.
레이드로 묶으면 차이가 많이 적어지나 레이드 카드 성능에 좌우가 되게 됩니다.
그리고 SATA하드는 엔터프라이즈 레벨이 아니기에 장기간 부하에는 SAS하드보다는 오래 못견딥니다.
-메모리 용량과 씨피유 성능은 네트웍 성능과 함게 얼마만한 유저가 들어와서 메모리와 씨피유 네트웍 자원을 사용하느냐에 따른 것입니다. 즉 어느 정도 모니터링이 필요합니다.
- 데이터 손실은 레이드 시스템이 아무리 좋아도 일어납니다. 특히나 레이드 시스템에서 재일 골치 아픈 기능인
온라인 익스펜딩은 하지 않는 편이 좋습니다. 용량 확장이 되어도 파티션 확장까지 안되며 다른 파티션으로
잡아줘야 합니다.
레이드는 데이터가 움직이는 작업공간이지 보존 공간은 아닙니다. 언제나 데이터는 깨질수 있습니다.
당해본 사람만 압니다.
- 확장 문제는 델과 상담해야 할거 같은데 우선 리뷰 자료를 보세요.
http://www.2cpu.co.kr/bbs/board.php?bo_table=hotstuff&wr_id=3117&page=2
- 화일서버에서는 차이가 없어 보입니다. 그러나 오에스가 차이 나므로 무언가 차이는 있겠지요.
- 메모리, 씨피유, 네트웍 대역폭은 모니터링이 필요하군요. 저는 윈도우 기준으로 모니터링때 "작업 관리자"의 성능탭, 네트워킹탭을 보는데, 모니터링시 도움이 되는 툴이 있는지 궁금합니다. 그래프 같은걸로 누적치 같은걸 보여주는게 있으면 나중에 보기 편할 것 같은데요. (하루 단위, 일주일 단위, 월 단위 같은거...)
- "작업공간이지 보존 공간은 아닙니다."라는 말이 와닿습니다. 팬이 고장나서 방치해둔 서버가 하나 있은데 백업서버로 만들어 놓아야 하겠습니다. 사용하시는 서버간 백업툴이 있으시면 추천 부탁드립니다.
- 확장 문제는 "델 파워볼트 MD1200 DAS 어레이"를 생각했었는데 문형님이 좋은 리뷰자료를 주셔서 더 명백해진것 같아서 기분이 좋습니다. 감사합니다. :)
다시 질문을 많이 드려서 죄송합니다. 문형님 말씀이 큰 도움이 되었습니다. 좋은 날들 되세요~
그게 아니면 부팅300/나머지 이렇게 구성가능합니다
아마도 델 cd로 부팅해서 win2008 설치하는 과정이면 단일 볼륨으로는 2tb 이상 못잡습니다
그래서 대부분 처음엔 145또는300 잡고 win2008 설치가 끝나 다음에 나머지 전부 잡을수 있습니다.
답변 감사드립니다. 혹시 위에 "대부분 처음엔 145또는 300잡고"라고 하셨는데 145를 잡는 이유는 무엇인가요? 그냥 145짜리 디스크가 있는데 그걸 통짜로 잡고 OS설치하고.. 인가요?
MBR(마스터 부트 레코드) 디스크는 표준 바이오스 파티션 테이블을 사용하는데 디스크 용량이 2TB를 넘어가면 부팅디스크로 인식하지 못합니다. 즉 바이오스에서 디스크를 인식하지 못한다는 것이고 OS 부팅이 되지 않는다는 것이지요.
그 문제점을 해결하기 위해 나온것이 GPT(GUID 파티션 테이블)디스크 입니다. GPT 디스크는 표준 BIOS 테이블 대신 EFI(Extensible Firmware Interface)를 사용합니다. 그리고 2TB의 용량 한계도 없습니다.
그러나 우리가 사용하는 PC들은 표준 바이오스를 사용하고, EFI는 애플 맥과 같은 일부시스템에서만 사용하고 있죠.
600GB 디스크 10개를 RAID5로 묶으면 총 용량이 5.4TB가 되고 이 것을 디스크 하나로 포맷해서 사용하실려면 GPT 디스크로 사용하시는 수 밖에 없습니다. 그렇지만 GPT 디스크는 표준 BIOS 테이블과 호환되지 않으므로 윈도우 설치 프로그램이 강제로 2TB로 분할 하는 것입니다.
개인적인 생각이지만, 디스크 10개 전부를 RAID5로 묶는 것은 그다지 좋지 않은 것 같습니다.
별도의 OS 설치용 하드디스크 드라이브를 지정하셔서 노멀로 OS를 설치하시고 나머지 디스크를 RAID로 구성하시는 것을 권장합니다.
더불어 현재 10개 묶은 하드 외에 두 개를 더 사서 RAID1으로 묶어서 OS를 설치해야 하겠습니다. 답변 감사드립니다~
절대적입니다.
답변 감사드립니다.