12년에 납품했던 서버가 잘 돌아가는 중 올 초 잦은 재부팅 현상이 발생했습니다.
설치 위치는 공장 내부이고... UPS에 물려놓고 쓰던 중이였는데. 점검 후 UPS를 빼고 직접 전원을 물렸더니 정상 가동 되었습니다..
그러던 중에 지난 주 부터 다시 재부팅 현상이 일어났고 금일 아침에는 kernel panic 까지 일어났더군요..
서버는 인텔 서버이고,. 대략적인 사양은 x5670 * 2, 8g, 1TB * 2개로 raid는 사용하지 않고 있으며 OS는 Centos 5.8 32bit 입니다..
첫번째 사진은 지난 주 재부팅 되면서 떳던 메세지이고 fsck 시행 후 2~3일 잘 돌다가 금일 두번째 사진과 같은 kernel panic이 일어났습니다.
유추해봤을 때는 filesystem에 문제가 생겨서 마운트를 못해서 생긴 현상 같은데.. 전원버튼으로 껏다 켰더니 지금은 또 부팅이 됩니다..
kernel panic 후 부팅되었을 때 msg는 아래와 같습니다. 자동으로 fsck가 실행된 듯 하네요.
그 사이에 또 리붓이 한번 榮쨉. 당최 원인을 모르겠습니다.
파워에 이상이 있다면 wtmp를 봤을 때 reboot이라고 뜨진 않을 것 같은데 말이죠..
설마 온도 때문에 이럴 수도 있을까요?
제가 알기로는 참... 서버가 설치된 현장이 좀 열악한 것으로 알고 있습니다..
미니™ & 프르츠
지름신을 물리쳐야 합니다...
sda3가 root 쪽인데 난감하네요..
이럴때는 live로 부팅해서 disk scan을 해봐야나요?
손 대지 말던지
한대 더 만들어가서 중요자료 백업받던지 하는게 나아 보입니다.
유지보수 계약이나 문제 해결하면 돈 재대로 받는 건 인가요??
일단 내일 업체 담당자랑 얘기해서 결정하기로 햇네요..
disk scan 등으로는 일시적으로 호전될뿐이므로
교체만이 해결방법 입니다.
디스크가 완전히 사망하기전에
정상 가동 시스템에서 해당하는 OS partion 디스크와
new HDD를 연결하시고
dd 나 dump command로 디스크를 통채로 복제 하셔서 교체 하시면
새로 OS 설치후 성정 작업을 하지 않아도 됩니다.
복제 진행중 다시 읽기 오류가 발생되면 새로 설치후 기존 설정대로 셋업 하셔야 됩니다.
new HDD는 동일 회사, 동일 제품 이어야 하는데 수급이 되지 않는 구기종 디스크라면
그냥 시도해보고 않되면 새로 설치로 가야할 수 밖에 없겠군요.
갑자기 골치아파집니다..
즉시 디스크를 복제하시는게 좋겠습니다.