stone92 2015-07

잘봤습니다. 요즘  ZFS로 스토리지 구성하시는 분들이 많아져서 좋네요..ㅎㅎ
결과들을 보고 좀 궁금한데요..10G 가 데이터 전송 시 FC 보다는 오버헤드가  많지 않다고 알고 있습니다.
즉 10Gbit 에서 실제 속도는 9.6Gbit/s 정도일테고 대략 1.2GB/s정도 라고 보고
현재 스토리지상에서의  디스크가 read가 940MB/s 인데 10g 통해서 연결된  VM들이
약 320MB/s 정도의 읽기가 나오는것은 10G로 연결한 상태에서는 너무 느린게 아닌가 의문이 듭니다.
혹시 10G 컨트롤러가 pci-e 어느 슬롯에 꽂혀있는지요??
10G 정도 처리하려면 pci-e v2  x4 이상에 꽃혀있어야 맞을것 같은데요..
제대로 꽃혀있는데도 위의 속도가 나오면 좀 이상한듯 합니다.

저도 님과 비슷한 구성에서 단지 FC 4G 로 연결해서 사용중인데
저랑 벤치결과가 차이가 많이 안나서 의문이 들었습니다.
저는 FC 4G 라서 대략 최대 속도가 대략 420MB/s  라고 치면 대충 맞아떨어지거든요.
http://2cpu.co.kr/bbs/board.php?bo_table=bmt&wr_id=1213

천외천oo노… 2015-07

이제 막 세팅을 완료해서 돌려보고 있는 상황인지라...확인을 좀 더 해봐야합니다.
저도 좀 의문이긴 해서요. 하하~

일단 zfs 가 설치된 서버 쪽은 PCI 3.0 x 16 에 장착되어 있습니다.

다만 ESXi 호스트는 PCI 2.0 x16 에 장착했는데요...확장카드들이 워낙에 많이 연결되어있어서...실제 속도를 좀 더 살펴봐야하구요. 더불어 다른 장비에서 추가로 테스트를 진행할 예정입니다

테스트하고 결과 나오면 다시 글 올리겠습니다.

천외천oo노… 2015-07

다른 장비에서 테스트해서 올렸습니다.
시퀀셜 읽기 속도는 제 속도가 나오네요.

4K QD 는 낮아졌는데...OS 자체가 달라서 그런 듯 합니다.
시간날때 동일 OS 로 다시 테스트해봐야겠습니다.

그나저나...처음 테스트했던 장비가 문제군요. 슬롯을 바꿔봐야겠습니다. ;;;

stone92 2015-07

역시 그랬군요...어쩐지 좀 이상하다 했습니다.
제 시스템은 핫스왑 백패널이 sata2 까지만 지원해서 컨트롤러가 6G 를 지원하는데도
제 속도를 못내는 상태인데 서버를 바꿀수도없고 해서 그냥 저냥 쓰기로 했습니다. ㅎㅎ

의과대학원생 2015-07

아..... 무슨말인지 잘 모르겠다...가만히 있어야지 ㅠㅠ (소근소근)
천외천님 대단하시네요 ㄷㄷㄷㄷ

손광민1 2015-07

저도 먼말인지 모르겠어요~ ; )

pass 2015-07

완전 부러운 시스템이내요 ㅠㅠ

NGC 2015-07

질문이 있습니다~
전 ZFS를  nexenta사용하다 zfsonlinux로만 사용하고 있어서..
제한사항이라하시면 raidz구성시 spare나 여분의 pool안의 디스크가 자동으로 change로 돌아가지 않는 부분 말씀하시는 건지요?
다른 제한 사항이 있는지 궁금합니다~
지금은 스토리지만 으로 사용하는건 아니지만 계속 zfs를 사용할 예정이라서
omnios 쪽도 관심이 있습니다.

천외천oo노… 2015-07

zfsonlinux 의 경우 zfs 의 기능이 100% implementation 된 상태가 아니라서...여기저기 좀 불편한 부분들이 있습니다.
기본적으로 samba 나 nfs 의 경우도 일일히 설정해주어야하구요.
zfs 옵션에서 smb 나 nfs 의 on/off 도 잘 안됩니다.

무엇보다도 앞서 말씀하신 spare 대체라던가...설정되어있는 disk 를 바로 뽑아버렸을때 대응방법이라던가...몇가지 차이점이 있습니다.

물론 opensolaris 쪽이 장점만 있는 건 아닙니다.
pool 구성 후 전체적인 퍼포먼스는 zfsonlinux 쪽이 더 좋습니다.
다만 디스크가 많아지면 관리의 편의성 역시 중요해지는 부분이 있어서...opensolaris 쪽으로 넘어왔습니다.

음...하지만...제가 리눅스 쪽의 내공이 부족해서...잘 모르는 부분도 있을 걸로 생각됩니다.

김승현1 2015-07

와 제가 구상했던 시스템이 이렇게 멋지게 있군요

감탄하고 갑니다