[VMWare] ESXi 6.0 -> ESXi 7.0.3 -> ESXi 6.7 전환 작업기록
FOXBIhttps://flings.vmware.com/usb-network-native-driver-for-esxi (415)https://www.running-system.com/how-to-install-vmware-esxi-5-5-driver-… (400)
일전에 자유게시판에
http://www.2cpu.co.kr/freeboard_2011/1463071
올렸던 것 처럼 갑자기 욕구가 솟아올라 진행했던 내용을 좀 정리해봤습니다.
ESXi 6.0은 꽤 오래전부터 써왔습니다. N54L에서 Microserver Gen8로 넘어가면서 부터 계속 써왔던거 같네요..
현재는 ML310e Gen8 v2 를 사용중인데 이때 하드웨어 교체를 할 때도 기존 사용하던 설치디스크를 가져와서
쭉 써왔습니다. 더이상 업글안한 이유는 귀.찮.아.서 였던거 같네요 ^^;;
암튼 왠지 최신버전을 써야겠다!!! 하는 생각으로 진행을 해봤습니다.
결론부터 말씀드리자면 위에 링크에서도 남겼듯 결과는 성공이었습니다.
하지만 몇가지 사소한 문제때문에 결국엔 ESXi 6.7 로 안착하게된거 같습니다.
사실 단독으로 쓰기에는 6.0이나 6.5나 6.7이나 7.0.3 이나 별다른 차이가 없는거 같더라고요 ㅎㅎ
#### 환경
Server : HPE Proliant ML310e Gen v2 CPU : Intel Xeon E3-1231 v3 RAM : 32GB OS Disk : 32GB SD Card VM Disk : SSD 256GB x 2ea, SSD 480GB x 1ea RDM Disk : 3TB x 4ea(RAID 5, for Xpenlogy) |
저는 업그레이드 방식을 택하지 않고 새로 클린 인스톨을 선택했습니다.
어짜피 단독 Hypervisor고 복잡한 설정이 없으며 OS설치간에 VM이 있는 디스크나 이런곳에
영향이 없을 것이기 때문에.... VM도 불러오기 쉽고 초반에 설정 조금만 하면 되니까요~
그래도 버전을 3단계 뛰는거라 좀 쫄긴했었네요 ^^;
Google검색이나 Vmware사이트 검색을 통해 설치 이미지를 받습니다.
HPE나 Dell같은 Vendor 제품들은 커스텀 이미지가 더 좋습니다
iLO또는 물리적인 부팅환경을 만든 후 부팅하면 설치진행이 됩니다.
체감상 7..0.3이 다른버전에 비해 로딩시간이 좀 긴거 같더라고요..
어디에 설치 할지 결정합니다. 위에 환경에서 언급했든 나머지 디스크는 다 활용내역이있고
32GB SD카드에 설치합니다. 방향키로 선택하고 엔터~!
이건 6.0 이라서 이렇게 나오는데 6.5이상에서는 Upgrade할건지 Install할건지 선택하게 합니다.
지금보니 6.0은 Upgrade하고 싶어도 못하는거였네요
CPU 지원 안한다는 메세지가 뜹니다. 좀더 자세히 들여다볼껄... 아래 언급하겠지만
CPU외에도 지원안한다는 내역이 더 있었네요...
패스워드 생성하는 메뉴를 지나면
아까 선택했던 32GB SD의 주소값을 찍어주며 진짜 여기 설치하냐고 한번더 묻습니다.
사실 좀 쫄아서 다시한번 뒤로가서 확인하고 오긴했습니다 ^^;;
잘 진행되고 있군요~
완료 되었습니다!
오류 뿜뿜 안한것만으로도 다행이라 생각들더라고요~ 재부팅해서 결과를 확인해야겠죠~
리부팅 후에도 잘 올라왔습니다.
이후 나머지 설정 등을 해주시면 Web UI로 접근이 가능합니다.
Web UI는 6.0 에서 기본지원은 아니었는데 별도 설치해서 사용해와서 그런지 별다른 차이를 못느끼고 사용할 수있겠더라고요..
자 여기까지가 지난 자유게시판에 올렸던 상황이고요.
VM들도 잘 기동 되고 별탈 없음을 확인했습니다.
하지만 한가지 맘에 안드는 구석이 있었습니다.
일부장치의 Driver... 기존에 6.0 에서는 USB NIC와 아직 활용은 안하고있지만 10G Card 가 달려있었습니다
USB NIC경우는 3rd party에서 만든 드라이버로 잘 사용해 왔고 10G Card도 잘 인식해 있던 것으로 기억납니다.
근데 7.0.3 에서는 USB NIC경우는 100Mbps 밖에 속도가 안잡히고..
10G Card는 아예 장치등록도 안된... 하드웨어는 인식했더라고요.. Broadcom BCM57711E ...
검색을 시작했습니다.
없습니다.. 7.0.3 에대한건 아무리 봐도 없습니다. 호환 장치 목록에도 없습니다..
그냥 쓸까 하다가.. 문득 "6.7이나 6.5에서는 되는건가?"
하는생각을 한 순간 저는 시간의 굴레로 빠져들어가고 있었습니다.
우선 ESXi 6.7 위와 동일한 방법입니다. 설치하면 되구요..
그나마 7.0.3에서 100Mbps로 잡았던 USB NIC조차 안잡힙니다. USB NIC야 드라이버 올려주면 잡히지만..
10G Card는 인식하지 않더라고요..
다시 ESXi 6.5로 가봅니다. 이럴 땐 고민할시간에 빨리 해보는게 상책입니다.
하하....
결과가 같아요... ㅠㅠ
뭐지? ESXi 6.0 때는 어떻게 인식이 榮彭탕..
고민하명 검색을 또 해봅니다.. 몬가가 나옵니다...
아뿔싸...
제가 가지고 있는 Broadcom BCM57711E는 오래된놈이고 공식적으로는 5.5 정도 까지밖에 지원이 안되는거였으며
제가 6.0 때 인식된걸 기억하는건 제가 드라이버를 설치한거였다는 기억이
혹시나 하는맘에 그 5.5 드라이버를 설치해봅니다. 오!! 된다!
게다가 6.0때 3rd party 드라이버로 잡았던 USB NIC를 6.5부터는 Vmware에서 fling? 뭐 이런 드라이버가 있는데
그걸로 지원한다고 되어있더라고요... 그걸로 설치했는데.. 엇.. 1000Mbps 로 잡힙니다.
7.0.3에서는 100Mbps였는데 몬가 희망을 발견하고
ESXi 7.0.3 으로 다시 가봅니다.
USB NIC는 7.0.2용으로 까지밖에 없지만 해봤는데 100Mbps 여전하네요..
5.5용 10G Card 드라이버를 설치했는데...
이런... 초기 콘솔상에서의 네트워크 설정이 아예 안되고 초기화면으로 넘어갑니다..ㅠㅠ
하... 다시 고민에 빠집니다... 어쩌지...?
최종결론은 'ESXi 6.7로가서 해보고 문제 안생기면 거기로 안착하자!'
결국 ESXi 6.7 설치후 USB NIC를 위한 vmusb-nic-Fling 드라이버를 설치해서 1000Mbps인식시키고
10G Card 5.5용 드라이버 설치해서 장치 정상인식 시키고 오류안나는 점까지 확인했습니다.
문제의 10G Card와 7.0.3때 100Mbps만 잡히던 USB NIC 지금은 다 정상입니다~
5.5 드라이버 잘 인식해서 올라옴..
7.0.3은 fling이 없었어도 USB NIC를 잡았으나 100Mbps였고 Fling 설치해도 변화가 없었음
6.7은 그냥은 인식못하고 Fling설치하고서 1000Mbps로 인식됨.
그냥 해봤던내용을 막 기록해봤네요~^^
당분간은 큰 업그레이드 없이 사용할것 같습니다 H/W가 바뀌지 않는한..
그래도 VM들은 별탈없이 다 올라와 줘서 다행입니다 ~
물론 호환성업그레이드 같은건 무서워서 손 안댔습니다.
혹 참고할 내용이 있으시다면 참고하시면 될것 같아요~
글 다쓰고나니 10G Card 드라이버가 좀더 버전 업 된게 있네요 한번 더 설치해볼려고요 ^^;
https://support.hpe.com/hpesc/public/swd/detail?swItemId=MTX-b1d0f1c34fbb4e67bf769903fc
저는 7.0은 헤놀이 호환안된다는 얘기를 들어서 6.7 update3 사용중입니다.
(지금은 잘 되는지 모르겠네요)
그런 문제면 VM 생성할떄 기준 버전을 낮추어보세요
USB NIC경우 7대에서 Driver는 1가지밖에 없던걸로 기억하니 그걸로 타협보세요 (7.0.2 2.5G 정상 작동중) (제대로 안 되면 에러 보고해보세요)
10G NIC경우는 설치 시작시 에러 뜨는 목록에 있었던듯합니다
하드웨어 Driver가 까탈스러운 (특히 구형) 장비를 쓰시면 6.7이 마지노선입니다 (리눅스 드라이버 먹히는 상한)
서버나 웤스테이션이라면 덜한데 홈렙에서 많이 쓰이는 장비들의 온보드가 꽃게라서 6.7을 버릴 수 가 없네요
그리고 7대 이제 USB/SD 지원을 짤라버린다는 애기도 나왔으니 어지간하면 SATA DOM이라도 장만하시는걸 추천할게요 (불가피하면 2.5" 추가)
일단 7.0.3 에서 SD에 설치되는건 확인하긴했고요.. 근데 이건 HPE 장비라서 가능한거 같긴해요..
supermicro 보드쓰는 다른 서버에서는 6.5에서도 USB 스틱에는 설치가 안됬었거든요..
말씀대로 6.7이 마지노선이라 여기고 여기에 정착하려고요 ^^ 그래도 여기서는 다 인식해줘서 고맙네요
정보감사합니다~
다만 공식적으로 지원을 없에버린다는 애기가 나왔을뿐입니다 (아마 7.0.x대는 괜찮을껍니다)
구버전이 안 되는건 좀 특이한 보드인가보네요
https://vninja.net/2021/09/02/esxi-sd-card-usb-boot-device-unsupported-in-7.0u3
https://www.theregister.com/2021/10/04/vsphere_ends_non_persistent_boot_storage
대충 이런식으로 제약을 걸기 시작했습니다
차후 아에 없에버릴꺼란 애기까지 들립니다
OSDATA 파티션을 저장할 별도의 persistent local device가 없는 경우에 못하게 한다는 의미입니다.
왜 그런지 다 설명되어 있구요.
결국 기존대로 USB/SD에 ESXi 올리고, 고정식에 VMFS만 올리는식으로 못 가게 한다는거겠죠 (로그등을 담을 파티션이 고정식에 가야하니)
그리고 아마 점진적으로 제약을 늘려서 저런 매체에서의 부트자체를 막겠다는 의도가 보이네요