이전에 글 올려보고 많은 도움 받아 이것저것 준비해서 어찌저찌 돌리는 구간까진 왔네요
https://www.2cpu.co.kr/vm/14315?&page=2
그간 진행했던 성과(?)들도 공유하고 더 얹혀가볼 수 있는 정보가 있을까 싶어 한 자 적어봅니다.
처음에 학습이 덜된 상태서 아래와 같은 모습을 구상했었습니다.
지금 다시보니 터무니 없는 내용이었네요 ㅠㅠ 창피합니다
[레이드]
일단 스토리지가 잘되는지 확인하기 위해 ssd 980 1tb x 2 를 보드내장 레이드1을 먹였더니 바로 인식을 않더군요. 이때 어케 해보겠다고 드라이버까지 만지작 거려봤지만 성과가 없었네요 (이런거 스트레스 안받으려고 보드도 z보드로 한건데 좀 아깝다 생각했습니다 b가 안된다는 뜻 아닙니다)
들어보니 esxi에서 인식못한답니다. 위 설계는 잘못된건가 싶었는데 헤놀에 보관할 데이터를 백업받는게 목적이었으니 스토리지 볼륨을 각 디스크에 분할해서 할당해주고 헤놀 내부에서 raid5 먹여봤더니 잘 되더랍니다. 사실 아직도 이게 맞나(?) 싶을정도로 의문입니다.
2번은 메인 볼륨으로 쓰고 3,4,5는 데이터 보관 (영상, 사진)용 raid5 구성까지 했습니다. 이 방식 괜찮은거 맞나요??ㅠㅠ
레이드 카드 쓰라고 하지 마세요.... (딥러닝용 카드랑 윈도우 nvme ssd 꽂을데 없어서 확장형 카드 삽입되있습니다. 총 2슬롯중 2슬롯 사용)
용량은 테스트용이라 임의로 넣은겁니다 (다 잘되면 싹다 밀고 다시 깨끗하게 진행할 예정입니다)
[esxi]
와.. 이건 좀 고단했습니다. 구축 초반 부이기도 했는데 램 이슈 이거하나때문에 오류 있는지도 모르고 자꾸 다운 먹고 프리징먹고 오류나고 설치도중 맛도 가고
걍 안되는구나 싶었습니다.(이때까지만해도 돈아깝다싶었네요) as보냈더니 새거로 교체해줬고(배송만 2주걸림) 현재는 7.0.1에서 엊그제 8.0까지 다시 올렸더니 잘되더랍니다 nic는 내장 intel v1225 쓰고있어서 그런지 무난하게 잘되네요!!
아 8.0 설치하고(22.12월 버전) arpl 쓰는데 로드 이슈가 있어서 뇌정지좀 왔었는데 패치 먹이니 (23.2월) 잘 되는거보니 나도모르게 아재미소 나왔네요
[헤놀]
trcp?로 학습해서 삽질의 나날을 보내던 와중에 나중에 arpl 의 편리함에 빠져버렸네요 근데 이 사이에도 트랜스코딩때문에 dsm 가상화 50번은 재설치 해본거 같습니다. (트랜스코딩은 아직도 해결 못봤네요 패치가 안먹어요 ㅠㅠ)
별거 다 설치 해봤습니다 7.1.1 잘되길래 올레 하고 있는데 트랜스코딩 안된다고 해서 7.0.1 42218-6 설치하는데 918은 설치부터 말을 안듣고 @#$&*@#$*
이슈 많은거 같습니다. 42218-6용 패치는 목록에 없다고 해서 vi 수정해봤는데 씨알도 안먹히네요 근데 얼굴 인식은 되네요... 오프라인 트랜스코딩은 안되는 상태입니다 (hel....p)
아직도 배워야할게 많은거 같네요 2달로는 부족한가 싶습니다. (사실 논 날이 더 많음)
다들 성공구축 하시길 바라요
DB랑 웹서버 그리고 데이터공간까지?
네트워크 리소스가 감당이 되지 않을듯 보입니다
제온이나 에픽도 아니고 일반 PC베이스로 해서 32G 메모리코어 구성과 메모리 구성은 모두 1코어씩 메모리는 4G씩 들어가면 그냥저냥 돌아갈만한 수준이지 사용할만한 수준은 되지 못할것으로 보여집니다
Guest 수를 줄이세요
IO설계까지는 안하셔도 괜찮지만 리소스 분할은 용도에 맞개 하셔야합니다
네트워크 ,디스크 IO 에 문제가 있어보입니다
실사용이 아니라 구성만 해서 설치만 해보는것이라면 크게 문제는 아닐것 같아보입니다.
1. cpu는 10코어 20쓰레드라 2개씩 주면 되겠지? 싶었는데 막상 구축해나가다보니 게스트는 3~4개로 줄여야 할것으로 보고있습니다. 일단은 위대로 해보고 줄이지 않을까 싶네요
2. 메모리는 확장이 자유로워서 늘리는데 어려움이 없을것으로 보고 있어요
3. 디스크 IO는 어떤 이슈가 있을지 이해를 못했어요 고견 부탁드립니다
성공적인 구축이되서 운영으로 넘어가면서 리소스 부족한것들은 다시 새로 꾸릴 생각으로 하고 있습니다 하게되면 쓰레드리퍼 쓸거같아요
- 1번 말씀하신 것 처럼 진행해도 괜찮습니다. 현재 VM의 부하량이 명확하지 않은 상태에서 일반적인 기준을 적용할 필요는 없어 보입니다. 실제 VM 돌려보면서 경험가며 조정해 나가는게 더 나은 선택 같습니다.
- 디스크 IO의 경우에도 해보시면서 조율하셔도 될 것 같습니다. 부하량을 모르니까요.
베리님도 말씀하셨지만 개인이 한번 해보는 것이니,
너무 많이 생각하는 것 보다는 하나하나 툭탁거리며 해보는게 재미아닐까요? ㅎ
나스 동접자수는 지인 및 가족들 정도가 될거라서 리소스 리스크는 걱정은 안될것으로 보이지만 모니터링만 잘해봐야겠네요
웹서버는 소규모 100인 예상하고 쓸 생각입니다. 이 단계까지 오면 열일하는 pc를 보며 모니터링이 즐거울거 같습니다
IO 설계는 레이드 구성부터 턱하니 막혀버려서 필요하다고 생각드는데 아직 감도 못잡고 있습니다.
리눅스 소프트레이드 써도 될까나요, 가상화디스크 안에 먼가 찝찝하긴해요
패스스루라는게 있던데 이건 어떤 용도일때 쓰는건가요 안좋다는 글들도 읽어본거같아요 (vmdk가 아닌 다이렉트로 사용하는 방식이라면 nas 스토리지용으로 쓸 생각을 하고 있습니다)
스토리지 구성 관련해서는 소프트레이드 사용하기 보다는 단순한 구조와 백업을 선택하라 말씀드리고 싶습니다. 스토리지 구성에 대해서 잘 이해하고 계시다면 다양한 기술로 고가용성을 구현하는 방법도 있을겁니다. 그러나 말씀하시는 것 보면 초보수준인 것 같구요. 그런 상황에서 다양한 기술들을 마구 섞어서 구현하면, 본인도 이해 못하고 관리능력도 떨어지는 상태가 됩니다. 즉, 더 불안정한 상태가 됩니다. 저는 스스로 이해하고 대응할 수 있는 수준에서 구현하는게 더 효과적이라고 봅니다. 어차피 ESXi 서버 한대로 고가용성은 말장난일 뿐이니까요.
그래서 잘 다루지 못하는 기술 쓰지마시고, 백업에 더 신경쓰시라고 권하고 싶습니다.
웹서버 100명이란건 회원이 100명인지 동시접속자가 100명인지, 접근하는 컨텐츠가 단순 웹 페이지인지, 복잡한 애플리케이션인지, 대용량 전송인지 등에 따라서 부하량이 많이 달라집니다. 아마도 회원수가 100여명이 아닐까 싶구요. 그 정도면 일단 시작하고, 늘려나가시면 됩니다. VM 좋은게 언제든 전원끄고 업스케일(확장)할 수 있는거니까요.
VMD 최근에 도입된거라 드라이버땜에 최신 유포판만 된걸 수 도 있습니다
이런 분야 다다익램이라 128기가 채워도 결국 모잘랍니다
DB빼곤 거기까지 심각하게 디스크 속도에 엃메이지 않을꺼같으니 버티긴할껍니다
어차피 내부 통신은 가상 스위치로 되는거니 시스템 성능만큼 속도 잘 뽑아줄꺼고, 네트워크 속도는 외부 서비스에 충분하면 됩니다
서버 규모가 명시 안 되어있으니 시퓨는 충분한지 아닌지 모르겠네요 (덜 민감한거 돌릴꺼면 보통 합계로 물리코어의 2~3배정도 할당한다고 생각하고, 좀 더 할당해주세요) (상시 부하 큰것들만 돌리는게 아닌 이상 코어 개수 넉넉하게 퍼줘도 큰 문제 안 생길꺼고, 10900정도면 7개정도 버티는데 충분합니다)
다다익램... 128도 모잘라다니...ㅠㅠ
디스크 용량따윈 푼돈으로 쉽게 늘릴 수 있는 가장 싼 자원이고 (iSCSI등의 수단도 있음), 시퓨는 돌리는 내용에 따라 다르겠지만 부하가 적은거 돌리면 10코어쯤 되면 잘 안 딸립니다
그런데 램은 아무리 용을 써도 저런 컨슈머용 시퓨 쓰면 DDR4론 128기가가 끝입니다 (거기다 패스스루 쓰는 넘들은 오버 프로비저닝도 안 되고, 100% 강제 락입니다)
다만 위에 적힌 100명이 동접 기준이라면 워드프레스같은 좀 무거운걸 돌리면 꽤 시퓨 먹어치웁니다
[ 기존 ]
상기 이미지 참조
[ 보드 지원 가능 슬롯 ]
- M.2 x 2
- sata x 4
[ 설치 구성할 디스크 ]
- SATA ssd 256 : esxi 설치용, ISO 데이터스토어
- M.2 ssd 1TB x 2 : VM OS 데이터스토어
- M.2 ssd 512GB : Native Windows용 (종종 쓸 목적, 확장카드사용)
- SATA ssd 2tb x 3 : NAS 스토리지용 (아직 미구매, 레이드 체결방식 결론에 따라 달라질듯)
저렇게 다양하게 서버를 분류 하시거나 나눠야 하는 꼭 이유는 있을까요...?
엄청난 중첩의 자원 낭비가 눈에 보입니다.
7개의 OS를 설치한다는 이야기 인데, 하나당 40G 씩만 잡아도 300G를 운영체제로만 잡히네요..
그냥 1개의 OS에서 원하는 기능 다 쓰셔도 아무런 문제 없어 보입니다.
결국 서비스는 IP:Port 로 쓰실것 같은데요..