mopin 2016-01

가상서버에 가상디스크를 물린다~  이게 무슨 말인지 조금 헛갈리네요.  일반적으로 가상 서버를 만들 때 .vmdk로 가상 디스크가 만들어 집니다.  그리고 가상 디스크가 저장 되는 공간을 데이터스토어라고 합니다.
즉, 뭐가 됐던 가상 서버 환경을 구성 한다면 데이터스토어는 반드시 필요한거죠.  다만 데이터스토어 연결 방식과 실제 디스크의 IOPS에 따라 Disk I/O 성능에 직접적인 영향을 미칩니다.
연결 방식은 SAN 스토리지, iSCSI 스토리지, 로컬 디스크 정도로 나누면 되겠네요. 
1. SAN 스토리지는 HBA 카드를 통해서 스토리지 장비로 연결 되는 것이고 (가장 일반적인 환경이죠.)
2. iSCSI 스토리지는 SAN, DAS 스토리지 연결이 아닌 네트워크를 통한 연결 방식이 될것이고
3. 로컬 디스크는 말그대로 호스트 서버에 설치 된 디스크 입니다.

연결의 인터페이스 방식에 따라 전송 속도가 달라지겠죠.  SAN 연결은 최대 8Gbps, 네트워크는 10Gbps 등등이요.  가상디스크를 데이터스토어가 아닌 네트워크 상의 경로에 직접 저장 하는 것은 불가능 합니다.  어찌 되었든 데이터스토어로 잡아서 해야하죠.

가장 보편적으로 쓰이는건 SAN 방식 입니다.  HA를 위한 공유 볼륨 구성, 인터페이스의 전송속도, 스토리지의 안정성 등등요.  물론 테스트 환경에서 SAN 환경을 구성 하는건 힘들겠지만요.

캔위드 2016-01

제가 설명이 부족했네요;;
당연히 가상서버를 만들려며 .vmdk가 필요하겠지요.
하지만 제가 주로 서버를 셋팅하는 스타일이 OS디스크는 철저하고 OS만 설치하고
서비스와 관련된 모든 공간은 별도의 디스크를 구성합니다.

윈도우 계열이라면 D 드라이브에
___nix계열이라면 /usr/local 또는 /svr 등으로 마운트 해서

질문의 요지는 OS디스크 구성이 아니라 서비스 디스크를 물리DISK하고 어떤 방식으로 연결하는게 가장 좋은 성능을 낼 수 있는지에 대한 질문입니다~

답변해 주신 방식은 별도의 SAN스토리지를 구성하고 가상서버에서 이용하는 방식인 듯 싶은데요.

음... 그럼 이제 SAN 쪽으로 방향을 잡아야 하는건가 보군요........

mopin 2016-01

다 떠나서 단순히 최선의 Disk I/O를 낼 수 있는 것이 무엇 인가로 본다면 전송속도, 읽기쓰기속도만 놓고 생각 하면 되겠네요.

네트워크 방식이 더 빠르다! 스토리지가 빠르다!  이렇게 보실게 아니라 저장 되는 디스크의 IOPS가 얼마나 나오는가를 따져 보셔야 겠네요.  가장 쉬운 방법으로 로컬 디스크에 충분한 용량의 SSD를 꼽고 쓰시는것이 테스트 환경에서는 가장 쉬운 방법이 되겠네요.

캔위드 2016-01

뭔가 내용이 멀리 가는것 같은데요;;;

그냥 단순하게

가상화 안하고 파일서버로만 구성하면 네트워크 드라이브 연결해서 전송속도가 100 ~ 110 MB/S 가 나오는데요
가상화를 하고 게스트OS에서 파일서버를 구성하고 네트워크 드라이브로 전송속도를 확인해 보니 60~70MB/S 정도로 속도가 떨어져서 하는 고민입니다.

(관련 업종에서 일하는 친구들은.......가상화는 죄다 개발이나 테스트 환경으로만 쓰더군요 ㅠ.ㅠ)

가상화 오버헤드가 분명히 있기에 가상화 안했을때 나오는 속도랑 똑같을 순 없겠지만
어떻게 하면 그래도 가장 근접하게 게스트OS에서 쓸만한 파일서버 구성이 가능할런지에 대한 고민인 것이죠
즉 일반적으로 혹시 실무(?)에서 쓰이는 안정적이고 빠른 방법이 있나 싶어서요..

좀 더 자세하게 상황설명을 드리자면

물리적인 머신이 2대가 있습니다. 10G nic으로 연결되어 있고
두개 머신 둘다 ASR-71605 카드가 꼽혀있고 4TB x 8 raid 5 로 구성되어 있으며 비 가상화시에 전송속도가 800MB/S정도가 나옵니다.

그런데 서버머신 성능이 나름 괜찮아서 스토리지서버로만 쓰려는게 아니라
ESXi 를 설치하고 여러개의 게스트 OS를 올릴 예정인데

이중에 스토리지서버 역할을 할 게스트OS는 아무래도 ASR-71605와 10G nic을 패쓰스루로 연결하여 서비스 하는게 제일 낫제 않겠냐 하는 것이였고요
물론 이게 제일 낫겠지만... 혹시 패쓰스루를 제외한 다른 방식들 중에 빠른 방법은 없는지가 궁금한 부분입니다.

죠짱 2016-01

전에 식사하면서 이야기 드린대로 passthru(vt-d)로 VM 에다가 SAS 카드를 물리면 됩니다....
그럼 당연히 인터페이스 속도대로 쓸수 있습니다...

캔위드 2016-01

넵 passthru가 제일 빠를 것 같긴 한데요.
실제로 vm중 파일서버 역할은 asr-71605랑 10g nic은 passthru로 연결할 예정이긴 합니다.

하지만 이건 vm하나에만 가능한 부분이고.
다른 vm들은 어떤식으로 써야 할지 고민이 되서 말이죠.

그리고 네트웍으로 빠르게 하는걸 누가 이야기를 해줬는데 방금 찾았습니다 ㅎㅎㅎㅎ
http://www.2cpu.co.kr/bbs/new_view.php?bo_table=4raid&wr_id=2863&qstr=&page=2
회원K님이였군요

쪽지로 문의해 봐야겠습니다;

친절한쿠키씨 2016-01

알고 계시겠지만, 패스스루로 연결할 경우 vMotion 을 포함한 일부 기능을 사용할 수 없습니다.

김치와김밥 2016-01

패스스루가 부담이 되어서 고민하다가 vSphere에서 RDM(Raw Device Mapping)을 사용해본 적이 있었는데, 생각보다 괜찮았습니다.
지금은 그냥 2012 R2 Hyper-V에서 실제 하드 디스크를 할당해서 사용 중입니다. 속도는 그럭저럭 나쁘지 않은 것 같습니다. 참고가 되었으면 합니다.