Nested 환경에서 이리저리 만져보다가 물리환경에서 vSAN을 구성하여 사용하고싶어져서
서버를 한대 더 만드는중인데 문득 궁금한점이 들었습니다.
캐시티어로는 인텔 옵테인 SSD를 사용할 예정인데
1. 일반적으로 All Flash 환경에서 캐시 1GB당 캐퍼시티를 얼마정도로 잡는지가 궁금하네요..
2. 또한 물리호스트 1대당 캐퍼시티티어용 스토리지가 몇장정도 들어가는게 보통인지도 궁금합니다.
3. 그리고 캐시티어에 들어갈 SSD의 모델이나 용량은 무조건 동일해야하는지도 궁금합니다.
4. 마찬가지로 캐퍼시티티어에 들어갈 스토리지의 모델과 용량또한 무조건 동일해야하는지 궁금합니다.
5. 마지막질문은 좀 황당할 수 있는데 램이나 옵테인메모리를 캐시티어에 할당할 수 있는 기능이 있는지 궁금합니다.
그렇게 문제가 많고 대형장애가 발생해도 꿋꿋하게 사용하는거 보면 대단하다는 느낌입니다.
VMWARE 기술지원팀/협력사들의 뱃집도 좋은것 같습니다. 어쩌라구!!!
다른건 메뉴얼 찾아보시구요, 무조건 지켜야 하는 내용은
1. 무조건 VMWARE HCL에 있는 장비, 파트만 사용해야 합니다
2. 사용하는 모든 파트는 무조건 동일해야 합니다. SSD의 경우 F/W 버전까지 맞추셔야 합니다
Network NIC도 동일하게 맞추시고, 메모리용량도 맞추세요
3. 매뉴얼에 없지만 이런 것도 되겠지 하는건 무조건 하지마세요
알겠습니다 반드시 HCL 보증장비들만을 사용하여 모든 파츠를 NIC나 F/W버전까지 엄격하게 통일하여 구성하도록 하겠습니다 ㅋㅋㅋㅋㅋㅋㅋㅋㅋ
추가적으로 한가지만 더 여쭙고싶은데 보통 All Flash환경에서 캐시/캐퍼시티의 비율은 어떻게되나요? 아니면 하이브리드 환경에서의 비율이라도 궁금합니다!
국내 기술지원 협력사의 추천은 7+1로 알고 있습니다. (오래전에 그랬습니다)
https://www.vmware.com/resources/compatibility/pdf/vi_vsan_profile.pdf
스토리지 운영정책 따라 정하면 됩니다.
https://storagehub.vmware.com/
https://docs.vmware.com/kr/VMware-vSAN/index.html
NIC 까지는 강제하지 않습니다.
6.5 이후의 AF 구성에서는 read/write 또는 io type 별로 권장이 좀 다른데 https://blogs.vmware.com/virtualblocks/2017/01/18/designing-vsan-disk-groups-cache-ratio-revisited/ 여길 참고 하시면 됩니다.
2. 물리 호스트당 몇개를 넣을것이냐의 의사결정은 DG(Disk Group) 를 몇개로 구성하느냐에 따라 다릅니다. 보통 권장은 2DG 구성이구요, 이때에는 DG 당 Cache 디스크는 1개, Capacity 디스크는 7장 까지 들어갑니다. 2DG 면 Capacity 디스크가 14개가 들어갈 수 있다라고 보시면 되구요. 기술적으로는 호스트 1대당 DG 를 5개까지 구성할 수 있습니다.
단적인 예로
1DG - 1x 1.2TB SSD cache + 6 x 2TB SSD Capacity 보다
2DG - 2x 600GB SSD cache + 6 x 2TB SSD Capacity 가 성능상으론 더 좋습니다.예를 단순하게 든것이니 참고만 하세요.
3. 동일하지 않아도 되는데 동일하게 하시는게 권장입니다. 사이즈가 다르게 들어가면 노드별로 캐시히트율이나 플러싱이 필요한 때가 각각 달라질 수 있어서 성능이 불균형하게 나올 수 있습니다.
4. 동일하지 않아도 되는데 동일하게 하시는게 관리상 편합니다. VMDK 의 사이즈나 Storage Policy 에 따라 VMDK 를 구성하는 Component 들의 숫자가 정해지는데, 이것도 다른 사이즈들을 배치하게 되면 개별 디스크의 Usage 가 좀 불균형하게 늘어날 수 있습니다.
5. 요건 안됩니다. Intel Optane SSD 자체를 캐시티어 용으로 쓸순 있지만, 말씀하신 방식은 안됩니다.
죄송하지만 한가지 질문만 더 드려도 괜찮을까요?
현재 VCG에 올라와있는 장비들로 vSAN을 구성하는중인데 HBA에 물려있는 12G SAS SSD들이 전부 Remote상태로 잡힙니다.. 그래서 구성이 안되네요..
정확한 상태를 묘사하자면 호스트로 접속할시 normal, degraded라고 나오고 VCSA로 접속하면 Remote로 잡히는데 Mark as Local을 하면 자꾸 실패를하네요..
HBA의 두 포트중 한개만 사용을 하는중인데 이게 문제가 될 수 있는 것인지 아니면 SAS 12G가 뭔가 제대로 지원이 안된다던가 선문제라던가 그럴 수 있을까요?
ssh로도 이것저것 해봤는데 답이 나오질 않네요 ㅠㅠ 선은 분명 sff8643 to SAS인데 고견을 여쭙고싶습니다..