안녕하십니까??
지난번에도 똑같은 질문을 올렸던것 같습니다만
아직 해결되지 않아서 다시 질문드립니다
마스터 1대 (dhcp + tftp 이용 이미지 전송)
<-> 스위치 허브로 연결
노드 사양
(6대)
CPU : i7-4770 ( 하이퍼쓰레딩 사용 )
CPU : i7-4770 ( 하이퍼쓰레딩 사용 )
M/B : Gigabyte b85m-d3h
메모리 : 삼성 4gb * 4
파워 : ZM-500le
파워 : ZM-500le
(1대)
CPU : i7-4790 ( 하이퍼쓰레딩 사용 )
M/B : Asus H97m-e
메모리 : 삼성 8gb * 2
파워 : 슈퍼플라워 500W
사용한 운영체제
Centos 6.5, 6.7
Kernel 2.xx 3.x 4.x 전부 사용해보았음.
(혹여나 메인보드를 지원하지 않을까봐 커널 업데이트 해보았으나 해결x)
구성은 하드디스크 없이 마스터 컴퓨터가 tftp로 부팅이미지 주고 프로그램은
스캐줄러 이용해서 MPI로 돌리고 있습니다.
한 1년간 잘 돌리고 있었는데 최근에 와서 계산용 서버들이 소리없이 재부팅 됩니다. (계속 재부팅 되네요)
더 이상한건 한놈만 죽는게 아니고 여러대가 번갈아 죽습니다.
최근에 붙이긴 했는데 우연인지는 모르겠는데 i7-4790 노드 하나는 한번 더 죽은적이 없습니다.
프로그램 돌아갈때 (코어 다 사용) 만 죽습니다.
첫째 계속 풀로드 사용하기 때문에 온도가 높아져서 꺼진다.
-> 이건 아닌것 같습니다. 여름이 아니라 요즘 온도도 낮고 팬도 잘 돌아가고 있습니다.
둘째 돌리는 프로그램이 이상하다.
-> 사용자 말로는 다른 컴퓨터에 돌려서 문제가 없다고 합니다.
셋째 파워가 이상하다.
-> 파워... 6대 한번 다 교체해 볼까요?? 산지 2-3년 정도 된 것 같습니다
넷째 랜선/허브가 문제다.
-> 허브랑 랜선 전부 교체해 보았으나 해결되지 않았습니다.
다섯째 케이스 단자랑 쇼트문제
-> 리셋버튼 빼버렸으니 여전히 그럽니다.
지난번에 rsyslog 서버를 만들어서 원격으로 로그를 보내버리라는 답도 있었지만
죽을때는 로그도 없이 죽습니다. 그냥 깨끗합니다.
노드들의 리눅스 설정에서는 커널패닉시 재부팅하라고 설정 안되어 있습니다.
프로그램에 문제가 있을까요?? 하드웨어?? 잘 모르겠습니다
감사합니다.
¸î´ë¸¸ ¸Þ¸ð¸®¸¦ Ç®¹ðÇغ¸´Â °Íµµ
¸ÕÀú ¸Þ¸ð¸®¸¦ µ¿Àû ÇÒ´çÇÑ ÈÄ¿¡ °è»ê¸¸ Çϱ⠶§¹®¿¡ µû·Î ¸Þ¸ð¸®°¡ ´Ã¾î³¯ ¿©Áöµµ ¾ø´Â °Í °°½À´Ï´Ù.
¾Æ ±×¸®°í ¸ÖƼÅǵµ ±³Ã¼ Çغ¸¾Ò½À´Ï´Ù.
¸Þ¸ð¸® ¾¾ÇÇÀ¯ÂÊ¿¡´Â ¹®Á¦°¡ ¾ø½À´Ï´Ù.
PCÀÎÁö¶ó ¸Þ¸ð¸®¿¡¼ ¿¡·¯³ª¸é ´äÀÌ ¾ø±â¿¡ (¼¹ö·ù´Â ECC¸Þ¸ð¸®·Î ¿¡·¯ º¸Á¤À» ÇÏÁö¸¸)
±ú²ýÇÏ°Ô ¹Ð°í À缳ġ¸¦ ÇÏ¼Å¾ß ÇÕ´Ï´Ù.
µ¨À̳ª HP´Â HW ·Î±×°¡ ³²´Âµ¥, »ç¿ëÇϽô º¸µå´Â ¸ð¸£°Ú³×¿ä.
HW Fail ·Î±× ÃßÃâÀÌ °¡´ÉÇÑÁö º¸µå ¸Å´º¾óÀ» º¸¼¾ß ÇÒ °Í °°¾Æ¿ä.
¸î´ÞÀü HP Àåºñ°¡ ¹«ÇÑ ¸®ºÎÆÃÀ» Çߴµ¥, ½á¸Ö¼¾¼ °íÀåÀ̾ú½À´Ï´Ù.
HDD ¸ðÅͶóµçÁö CPUÄð¸µÆÒ, ÆÄ¿ö¼ÇöóÀÌ Äð¸µÆÒ..À̶óµçÁö,
HDD°¡ ¾ø´Â ½Ã½ºÅÛÀ̶ó¸é Äð¸µÆÒºÎÅÍ Çϳª¾¿ ¼ø¼´ë·Î Á¡°ËÇØ º¸½Ã±â ¹Ù¶ø´Ï´Ù.
±× ´ÙÀ½À¸·Î ½±°Ô °íÀ峪´Â ÀüÀÚºÎÇ°Àº ¸ÞÀκ¸µå ȤÀº ÆÄ¿ö¼ÇöóÀÌ Äܵ§¼ÀÔ´Ï´Ù.
ÀºÎºÐÀÌ ºÎÇ®¾î ¿Ã¶ó ¹èºÒ¶ÒÀÌ°¡ µÇ´Âµ¥ ºÎÇ®¾î ¿À¸£Áö ¾Ê¾Æµµ °íÀåÀÎ °æ¿ì°¡ ²Ï ÀÖ½À´Ï´Ù.
Çϵå¿þ¾î ¹®Á¦´Â µû·Îµû·Î ¹Ù²ãº¸¸é¼ Å×½ºÆ® ÇغÁ¾ß µÉ °Í °°½À´Ï´Ù.
ÆÄ¿ö¼ÇöóÀÌ -> ¸ÞÀκ¸µå ¼øÀ¸·Î È®ÀÎÇغ¸°Ú½À´Ï´Ù.
°¨»çÇÕ´Ï´Ù.
1. ¼¹öÂÊ IOÁß WriteBack °ø°£(Temp°ø°£)ÀÇ µð½ºÅ© ¹èµå ¶Ç´Â ÀÌ»óÀÌ ÀÖ´Â °æ¿ì ¹ß»ýµÉ¼ö ÀÖ½À´Ï´Ù.
2. ¿øÀκҸíÀÇ ³×Æ®¿öÅ© ºÎÇÏ·Î ÀÎÇÑ µð½ºÅ©¾²±âÁö¿¬(ÀбâÁö¿¬)¿¡ µû¸¥ ¹®Á¦Àϼöµµ ÀÖ½À´Ï´Ù.