안녕하십니까??
서버가 항시 잘 안정되게 돌아가면 좋겠는데 한번씩 말썽을 피워주네요.
마스터와 노드들은 허브를 이용해서 내부 네트워크를 구성하고 있습니다. (계산용 컴퓨터 입니다)
마스터 컴퓨터랑 노드 컴퓨터랑 NFS 로 공유폴더를 공유하고 있습니다.
허브는 cisco 24ports managed switch 입니다.
그런데 새벽에 노드에서 nfs server 10.0.0.1 not responding still trying 이라고 뜨더니 안되네요.
핑을 날려봐도 응답이 없습니다.
메인보드 후면포트에 불 들어오고 허브 들어가서 로그 내역을 봐도 끊김이 없었습니다.
show interfaces status 해도 잘 인식 된다고 떴는데요
결국 다른 랜선을 가지고 다른 포트에 꽂으니까 그때서야 인식을 합니다.
허브 포트 문제 아니면 랜선 문제 같은데요. 랜선이 좀 많이 낡았습니다.
혹여나 랜선이 문제가 되면
위와같이 불 다 들어오고 로그 내역도 끊긴 내역이 없는데 서로 통신을 못하는 경우가 생길수 있나요??
감사합니다.
연결은되있고 불들어와서 핑 응답이 없었습니다.
여러가지 테스트 다하다가
랜선을 타이로 너무 꽉껴논것 같아서 랜선 바꿔줬더니 그 증상이 아예 사라졌네요^^
저도 첫번째로 랜선을 다 바꿔주고 두번째로 허브를 의심하려고 합니다
저희 고객사 운영서버가 같은 내용으로 예전에 장애가 발생하여 애먹었습니다.
결과적으로 해결은 되었으나 정확한 원인을 찾지 못했습니다.
하드웨어때문에 발생한 문제로 보기에 다른 서비스들은 너무나 정상적이였기에 랜선은 의심하지 않았습니다.
원인찾으시면 피드백 남겨주시면 감사하겠습니다.^^
참고삼아 히스토리 남겨드립니다.
1.nfs스토리지 구축후 마운트하여 약2년동안 장애없이 사용 (클라이언트 centos 6.2)
2.새벽시간에 본문에 에러발생하여 최초 장애발생
3.장애확인시점에 서버/클라이언트 모두 OS레벨에서 네트워크는 이상이 없었으나
nfs는 복구되지 않고 수동으로 mount/unmount 조차 할수 없는 상황으로 재부팅후 즉시 정상인식
4.1회 발생이후 불특정주기로 약4개월간 새벽시간에 발생 (짧게는 1주 길게는 2개월)
5.주기적으로 클라이언트에서 서버로 접근하여 파일기록하도록 백그라운드 데몬 추가
6.약6개월간 장애없이 운영
7.4번과 같은 현상이 2회 다시 발생함
8.마지막 장애 발생이후 현재까지 1년여간 정상운영
4번까지 비슷한데요 저는 이번이 첫번째였습니다.
랜 테스터기로 문제가 난 랜선을 확인해보니 간혈적으로 랜선이 문제가 있긴 한 것 같습니다.
랜선 교체 후 별일 없으면 한달 후에 혹은 문제가 생기면 이 게시글에 댓글로 피드백 드리겠습니다.
물론 위의 방법이 해결책이였는지는 잘 모르겠으나 랜선 전부 교체 이후로는 이상 없이 잘 사용하고 있습니다.