´Ù½Ã Á¤¸® Çؼ­ Áú¹® µå¸³´Ï´Ù.(½ºÅ丮Áö°ü·Ã)

naan   
   Á¶È¸ 3947   Ãßõ 0    

 현재 회사에서 스토리지 서버(Centos)가 있습니다. (12bay 4T HDD)

이 서버가 리눅스로 이루워진 클라이언트 장비(약200대)에 nfs 로 연결되어 있습니다.

클라이언트에 각각 시뮬레이션이 돌아가고 돌아갈때마다 스토리지 서버에서 데이터를 가져와서 작업을 하고 작업이 다 끝난 파일을 스토리지 서버에 복사하기도 하는 작업을 합니다.

파일 용량은 큰것들은 몇기가짜리도 있고 작은 파일은 1x kb 정도 됩니다.

이러다 보니 작업 하다가 특정 작업이 네트워크 과부화가 걸리면 전체 네트워크가 행이 걸려버리네요.


이걸 개선을 하기 위해서 여러가지 알아보고 있습니다.

그래서 SSD 스토리지 혹은 SAN 혹은 다른 대안이 있나 알아보고 있는데 쉽지가 않네요.

모든 네트워크 구간은 1G로 되어 있습니다. 스토리지 서버는 본딩을 해서 3G로 늘려놓은 상태이긴 합니다.


많은 의견 부탁 드립니다.

첫질문

http://www.2cpu.co.kr/QnA/690612#c_690614


-- 추가 --

네트워크 행이 걸릴때는 NFS 로 연결되어 있기 때문에

클라이언트(모든클라이언트 공통)에서 /data/storage 접근에서 작업을 해야 하는데

스토리지가 행이 걸린 상태라 /data/storage 접근 할때 딜레이가 발생 합니다.

이러다 보니깐 전체 대역이 아닌 스토리지가 연결되어 있는 nfs 대역만 행이 발생 합니다.


-- 추가2 --

서버 spec

E5606@2.13Ghz

RAM : 8GB 

Raid Card : LSI RS2BL040 


-- 추가 3 --

1년치 장비로그 입니다.



ªÀº±Û Àϼö·Ï ½ÅÁßÇÏ°Ô.
ȲÁø¿ì 2019-02
Á¦ »ý°¢¿¡´Â ·¹À̵å Ä«µå 3°³·Î ºÐ¸® ÇϽÉÀÌ ¾î¶³·±Áö¿ä.
Ä«µå Çϳª´ç Çϵå 4°³¾¿ Çؼ­ 3±×·ìÀ¸·Î ¸¸µé¾î »ç¿ë ÇϽÉÀÌ..
¾Æ´Ï¸é Ä«µå 4°³¿¡ Çϵå 3°³¾¿µµ ÁÁÀ»µí ÇÕ´Ï´Ù.
     
naan 2019-02
·¹À̵å Ä«µå¸¦ ´Ã¸®´Â°Ô º¸Åë ¿ë·® Áõ°¡°¡ ¾Æ´Ñ°¡¿ä? ·¹À̵åÄ«µå¸¦ ¿©·¯°Ô ÀåÂøÇϸé ij½¬ ¸Þ¸ð¸® ´Ã¾î³ª¼­ ÆÛÆÛ¸Õ½º°¡ ÁÁ¾ÆÁö´Â°Ç°¡¿ä?
          
¹Ú¹®Çü 2019-02
ÇÑ ¼­¹ö¿¡ ·¹À̵å Ä«µå¸¦ ´Þ ¼ö ÀÖ´Â ÇÑ°è°¡ ÀÖ±ä ÇÕ´Ï´Ù..

¾Æ´äÅÿ¡¼­´Â 4°³±îÁö ¸ø¹Ú¾Ò°í LSI´Â º¸µå°¡ Çã¿ëÇϴµ¥±îÁö¶ó°í Çϴµ¥ ½ÇÁ¦ Çغ¸¸é 3-4°³ Á¤µµ°¡ ÃÖ´ëÀÔ´Ï´Ù..

Ä«µå°¡ 3°³¸é µð½ºÅ© º¼·ýÀº 3°³·Î ÂÉ°³ÁöÁö¸¸ ¼­¹ö¿¡¼­ µð½ºÅ© I/O ´ë¿ªÆøÀÌ PCIe 8x ¿¡¼­ PCIe 24x ·Î ´Ã¾î³¯ ¼ö´Â ÀÖ½À´Ï´Ù..

¼øÀüÈ÷ ´ë¿ªÆøÀ̶ó ½ÇÁ¦ ½ºÅ丮Áö ÆÛÆ÷¸Õ½º´Â ´Ù¸¨´Ï´Ù..
 
±×¸®°í ¿ô±â°Ôµµ ij½¬ ¸Þ¸ð¸®¸¦ ¾öû Å©°Ô ´Þ ¼ö ÀÖ´Â Ä«µå´Â ¾Æ·¹Ä« ÀÔ´Ï´Ù..

Å©´Ù°í ´Ù ÁÁÀº °ÍÀº ¾Æ´ÏÁö¸¸¿ä..
¹Ú¹®Çü 2019-02
ÇöÀç ½ºÀ­Ä¡´Â ¾î´À ȸ»ç Á¦Ç°À» »ç¿ëÇϽóª¿ä??

±×¸®°í 200´ë¸¦ ´ë·« ¾î¶² ½ÄÀ¸·Î ³×Æ®¿÷À» ±¸¼ºÇϼ̳ª¿ä??
     
naan 2019-02
Á¦Ç°Àº ³Ý±â¾î gs724T Á¦Ç°À¸·Î ±¸¼ºµÇ¾î ÀÖ½À´Ï´Ù.
´Ù¸¥ ȸ»ç¿Í ¸¶Âù°¡Áö·Î ¶ó¿ìÅÍ + ½ºÀ§Ä¡·Î ±¸¼ºµÇ¾î ÀÖ½À´Ï´Ù.
          
¹Ú¹®Çü 2019-02
GS724T ¿©·¯°³¸¦ ÁÖ··ÁÖ·· Çؼ­ 200¿© Æ÷Æ®´Â ¸ó°¡ ¾È ¸Â´Â µíÇÕ´Ï´Ù..

HP³ª ½Ã½ºÄÚÂÊ¿¡¼­ ³ª¿À´Â ¹Ý Àå·Õ±Þ µ¥ÀÌÅͼ¾ÅÍ¿ë ¹éº» ½ºÀ­Ä¡ÂÊÀ» »ý°¢Çغ¸½Ã´Â°Ô ¾î¶³·±Áö¿ä??
epowergate 2019-02
NFS ±¸Á¶»ó ½ºÅ丮Áö ¶§¹®¿¡ 1»ç¿ëÀÚ°¡ ¸¹ÀÌ »ç¿ëÇÒ¶§ Àüü Network¿¡ ÇàÀÌ °É¸®Áö´Â ¾Ê½À´Ï´Ù.
°­Á¶ÇÕ´Ï´Ù.  Àý´ë·Î Àüü Network Hang °É¸®Áö ¾Ê½À´Ï´Ù.

ÀÏ´Ü NFS¸¦ »ç¿ëÇϽô °É º¸¸é Client OS´Â Linux¶ó ¿¹»óÇÕ´Ï´Ù.
Client 200´ë¸é NFS ¼­¹ö 1´ë°¡ °¨´çÇϱ⿡ Á» ¾î·Á¿ï ¼öµµ ÀÖ½À´Ï´Ù.  ±×·¸´Ù°íÇؼ­ °¨´ç ¸øÇÒ Á¤µµÀÇ ¼öÁصµ ¾Æ´Õ´Ï´Ù.

Client ¼ö·®ÀÌ ¸¹À»¶§´Â ´ÙÀ½°ú °°Àº ¹æ¹ýÀÌ ÀÖ½À´Ï´Ù.
1. ¿¹»êÀÌ Çã¿ëÇÑ´Ù¸é NetAppÀ¸·Î ¹Ù²Ù¼¼¿ä.  NetAppÀÌ ÃÖ´ëÀÇ ¼º´ÉÀ» »Ì¾ÆÁÖ´Â NAS´Â ¾Æ´ÏÁö¸¸ ¸¹Àº µ¿Á¢À» Àß Ã³¸® ÇÕ´Ï´Ù.
    ¿¹»êÀÌ Á» ´õ Çã¿ëÇÑ´Ù¸é OnTap »ç¿ëÇϽñ¸¿ä
2. Storage ServerÀÇ OS¸¦ Windows Server 2016À» °ËÅäÇØ º¸¼¼¿ä.
    Windows Server 2016¿¡ ÀÖ´Â NFS ¼­¹ö°¡ ÀÇ¿Ü·Î ÁÁ½À´Ï´Ù.  (Ȥ½Ã ¾ÈƼ °Å½ÇºÐ ÀÖÀ¸¸é Á÷Á¢ Å×½ºÆ® Çغ¸½Ã°í °Å¼¼¿ä.  300-500¸í NFS »ç¿ëÀÚ¸¦Áö¿øÇÏ´Â ½Ã½ºÅÛµé ±¹³»¿¡µµ ²Ï ÀÖ½À´Ï´Ù.)
    Storage (½ºÅ丮Áö¼­¹ö ¾Æ´Ô) ·Î¼­ Á¦°øÇØ¾ß ÇÏ´Â ¿©·¯°¡Áö ±â´ÉÀ» Á¦°øÇÏÁö´Â ¾ÊÁö¸¸ ´Ü¼øÇÑ File Service·Î »ç¿ëÇϱ⿡´Â ³ª»ÚÁö ¾Ê½À´Ï´Ù.
3. BSD ¿î¿µÀÌ °¡´ÉÇϽøé ZFSµµ ´ë¾ÈÀÌ µÉ ¼ö ÀÖ½À´Ï´Ù.
    Ubuntu¿¡ ÀÖ´Â ZFS.ko ÁÁ½À´Ï´Ù.
    ÀåÅÍ¿¡ ÀÖ´ø FusionIO 2°³ ¶Ç´Â4°³ Àâ¾Æ¼­ Cache·Î ¼³Á¤ÇÏ½Ã¸é ¸Å¿ì ¸Å¿ì ¾µ¸¸ ÇÕ´Ï´Ù.
3.1.  Àú´Â °³ÀÎÀûÀ¸·Î ZFS °ü¸®¸¦ ¸øÇÒ»ç¶÷Àº »ç¿ëÇؼ­´Â ¾ÈµÇ´Â ½Ã½ºÅÛÀ̶ó°í ¸»À»ÇÕ´Ï´Ù.
    Ȥ½Ã ¿¹»êÀÌ µÇ½Ã¸é NexantaStor License DC Àß¹ä¾Æ¼­ »ç¿ëÇØ º¸½Ã´Â°Íµµ ÁÁÀ»°Í °°½À´Ï´Ù.
4. Lustre³ª Gluster/Ceph °°Àº ºÐ»êÆÄÀÏ ±ÇÀåÇÕ´Ï´Ù.
  À̳ѵéÀÌ ±¸Á¶»ó 1000-2000´ë Client Áö¿øÇϴµ¥ ÀüÇô ºÎ´ãÀÌ ¾ø½À´Ï´Ù.
  °ø°³ SWÀ̱⠶§¹®¿¡ Á¤¸»Á¤¸» ¿¹»êÀº ¾ø´Âµ¥ ÇÊ¿äÇϽøé Çغ¼¸¸ ÇÕ´Ï´Ù.
  ´Ù¸¸, ¹®Á¦°¡ ¹ß»ýÇÏ¸é µ¥ÀÌÅ͸¦ ¸ù¶¥ ³¯¸± ¼ö Àֱ⠶§¹®¿¡ ¸ð¸£½Ã¸é Àý´ë »ç¿ëÇÏÁö ¸¶¼¼¿ä.
  Ceph/Gluster´Â REDHAT¿¡¼­ subscriptionÀ¸·Î ±¸¸Å/Áö¿ø ¹ÞÀ» ¼ö Àֱ⶧¹®¿¡ ³ª¸§ ³ª»ÚÁö ¾Ê½À´Ï´Ù.  Àú·ÅÇÏÁø ¾Ê½À´Ï´Ù.
     
naan 2019-02
´äº¯ °¨»çÇÕ´Ï´Ù. ¿©·¯°¡Áö ´ë¾ÈÀ» Á̴ּµ¥
1¹øÀº ¿¹»êÀÌ ±×¸® ¸¹Áö°¡ ¾Ê¾Æ¼­ Èûµéµí ÇÏ°í¿ä.
2¹øÀº Á¦°¡ °æÇèÇغ»ºÁ·Î MS Á¦Ç°ÀÌ ³×Æ®¿öÅ© °øÀ¯¿¡ ´ëÇؼ­ ¹®Á¦°¡ ¸¹¾Æ¼­ ¸®´ª½º °è¿­·Î ³Ñ¾î¿Ô½À´Ï´Ù.(¶óÀ̼±½º¹®Á¦µµ ÀÖ°í..)
3,4 ¹ø È®ÀÎ ÇغÁ¾ß °Ú³×¿ä.
     
³É²ÛÀÌ 2019-02
windows nfs °¡ ÀÇ¿Ü·Î ÁÁÀº°Å±º¿ä. ¼±ÀÔ°ßÀÌ ÀÖ¾ú½À´Ï´Ù. ÁÁÀº Á¤º¸ °¨»çÇÕ´Ï´Ù.

gluster¸¦ ¿î¿µ ¸¹ÀÌ Çغ¸¼Ì´ÂÁö¿ä? Á¦°¡ ½Ç·ÂÀÌ ºÎÁ·ÇÏ¿© ¹ß»ýÇÑ ¹®Á¦°ÚÁö¸¸ ÇØ°á ÇÏÁö ¸øÁE°í Â÷¼±ÅÃÀ» ¼±Åà Çß¾ú½À´Ï´Ù.. gluster¿¡¼­ ´ÜÀÏ µð·ºÅ丮 ¾È¿¡ ÆÄÀÏÀÌ ¸¹À¸¸é ÆÄÀÏ list¸¦ ÇÏ´Â ½Ã°£ÀÌ ³Ê¹« ¿À·¡ °É¸®´õ±º¿ä. µð·ºÅ丮´ç ´ë·« 1~3¸¸°³ °¡·® À̾ú½À´Ï´Ù. Ȥ½Ã ÀÌ ¹®Á¦¸¦ ÇØ°áÇÒ ¹æ¹ýÀÌ Àִ°¡¿ä?? Àڱ׸¸ÇÑ ÆÁÀÌ¶óµµ ¾Ë°í ½Í½À´Ï´Ù. °¡¸£Ä§À» ÁÖ½Ã¸é ¿µ±¤ÀÔ´Ï´Ù.
          
epowergate 2019-02
gluster ÃÖ´ë ´ÜÁ¡ÀÌ 1. node ¼ö°¡ 8´ë ³Ñ¾î°¡¸é ´À·ÁÁü, 2. listingÀÌ ´À¸² ÀÔ´Ï´Ù.
gluster´Â ±¸Á¶»ó listingÀÌ ´À¸°°Ç ´äÀÌ ¾ø½À´Ï´Ù.  ls -r µîÀÌ µé¾î°¡¸é ´õ ´äÀÌ ¾ø½À´Ï´Ù.
»ç½Ç gluster»Ó¸¸ÀÌ ¾Æ´Ï¶ó ºÐ»êÆÄÀÏ ½Ã½ºÅÛµéÀÌ °øÅëÀûÀ¸·Î °¡Áö°í ÀÖ´Â ÇÑ°èÀÔ´Ï´Ù.  ¹°·Ð ÀϺδ Á» ´õ ÀßÇÕ´Ï´Ù.
Æ®¸¯ÀÌ ÀÖ±â´Â Çѵ¥ SAMBA-Gluster optionÀÌ ÀÖ½À´Ï´Ù.
À̸¦ »ç¿ëÇϸé SAMBA¿¡¼­ gluster directory listing¿¡ ´ëÇÑ cache¸¦ °¡Á®°¥ ¼ö ÀÖ°Ô ÇÒ ¼ö ÀÖ½À´Ï´Ù.  ±×·¯¸é Á» »¡¶óÁý´Ï´Ù.
               
³É²ÛÀÌ 2019-02
Ä£ÀýÇÑ ´äº¯ °¨»çµå¸³´Ï´Ù.
»ç¼ö¾øÀÌ È¥ÀÚ ÇÏ´Ù º¸´Ï Èûµé¾ú´Âµ¥..°¨»çÇÕ´Ï´Ù.
Á¤¸» ¸¹Àº µµ¿òÀÌ µÇ¾ú½À´Ï´Ù.
´Ù½Ã Çѹø °¨»çµå¸³´Ï´Ù.
ȲÁø¿ì 2019-02
Á¦°¡ »ý°¢À¸·Î´Â hdd ºÎÇÏ¿¡ µû¸¥ ij½Ã ·Îµù ¹®Á¦ Àεí ÇØ º¸ÀÔ´Ï´Ù.
Áï ¶óÀÌÆ®¿Í ¸®µå¸¦ µ¿½Ã¿¡ ÇÏ´Ù º¸¸é ij½Ã¸¦ Áö¿ì°í »õ·Î ·ÎµùÀ» ÇÏ´ø ¶óÀÌÆ®¸¦ ÇÏ´ø ÇؾߵǴµ¥¿ä.
Å« ÆÄÀÏ ¶óÀÌÆ®°¡ ÀÖÀ»¶§ ÀÛÀº ÆÄÀÏ ·Îµù°ú ¶óÀÌÆ®°¡ »ý±â´Ùº¸¸é Å« ÆÄÀÏ ¶óÀÌÆ® ÁÖ¼Ò Á¤¸®°¡ ÇÊ¿ä ÇÏ´Ùº¸´Ï »õ·Î ÀڷḦ ¸®ºôµù ÇÕ´Ï´Ù.
±×·¯´Ù º¸¸é ÈçÈ÷ ¸»ÇÏ´Â Çϵ巢ÀÌ °É¸³´Ï´Ù..
À¯´Ð½º °è¿­¿¡ ¿¾³¯ºÎÅÍ ÀÌ·±¹®Á¦°¡ Á¾Á¾ ÀÖ¾ú½À´Ï´Ù..
¾ÆÁÖ ¿¾³¯ 83³âµµ °æÇèÀÔ´Ï´Ù.. ÇÏÇÏÇÏ
ÇöÀç¿¡µµ ±×·± Çö»óÀÌ ÀÖ½À´Ï´Ù. ÇÏÇÏÇÏ
±×·¡¼­ hddÄÁÆ®·Ñ·¯¸¦ ¿©·¯°³ Ãß°¡ ÇϽô°ÍÀÌ ±×·± Çö»óÀ» Á» ÁÙÀϼö ÀÖÀ»µí ÇÕ´Ï´Ù¸¸..
epowergate 2019-02
Çϳª´õ,
Client¿¡¼­ »Õ¾î´ë´Â µ¥ÀÌÅÍ°¡ lock¿¡ ¹Î°¨ÇÏÁö ¾ÊÀ¸¸é SAMBAµµ °ËÅäÇØ º¸¼¼¿ä.
SAMBA°¡ Client´ÜÀÇ Cache¸¦ ÀßÇϱ⠶§¹®¿¡ Å« ½Ã½ºÅÛ¿¡¼­´Â °æ¿ì¿¡ µû¶ó¼­ ´õ ¿øÇÒÇÏ°Ô ¼­ºñ½º¸¦ Á¦°øÇÒ ¼ö ÀÖ½À´Ï´Ù.

ÀúÈñ ÀϺ» °í°´Áß¿¡ ÀϺ» 53°³ Áö¿ª, 1,500¸íÁ¤µµ°¡ µ¿½Ã¿¡ »ç¿ëÇÏ´Â ½Ã½ºÅÛÀÌ ÀÖ½À´Ï´Ù.
SAMBA·Î ¼­ºñ½º ÁßÀε¥ 5³â 4°³¿ù° ¹«Á¤Áö ¼­ºñ½º ÇÏ°í ÀÖ½À´Ï´Ù.
¹®Á¦ÀÇ ¿øÀκÎÅÍ Àß ºÐ¼®Çغ¸½Ã±æ..

1. Á¤¸» ³×Æ®¿öÅ©ÀÇ ¼Óµµ°¡ ´À·Á¼­ ÀÎÁö?
2. ´À¸° µð½ºÅ© i/o ¶§¹®ÀÎÁö?
¹Ú¹®Çü 2019-02
Ȥ½Ã °¡´ÉÇÏ½Ã¸é ¶ó¿ìÅͳª ¸Å´ÏÁö¸ÕÆ® Çãºê¸¦ ÅëÇؼ­ ½ºÅ丮Áö¼­¹ö¿¡ ¾ó¸¶³ª ºÎÇÏ°¡ ÁÖ¾îÁö´ÂÁö Á¾ÀÌ¿¡ Àû¾î¼­ ½Çüȭ ÇÑ ÈÄ È®ÀÎÇغ¸¼¼¿ä..


½ºÅ丮Áö ¼­¹ö CPU ºÎÇÏ°¡ °è¼Ó 50% ÀÌ»óÀÎÁö 

·£Æ÷Æ® 3°³ 3G°¡ °è¼Ó ºÎÇÏ°¡ 100% ·Î ¿Ã¶ó°¡¼­ ¹®Á¦ÀÎÁö  (´ë¿ªÆø È®Àå ÇÊ¿ä)

½ÇÁ¦ »ç¿ë·®Àº ·£Æ÷Æ® 1°³ ºÐÀÎ 1G Á¤µµ ÀÎÁö  (¾öû ¸¹Àº ¿©·¯°³ÀÇ ÆÐŶÀÌ ¾û±ä °ÍÀ̶ó ¶ó¿ìÅͳª ÇãÇÁ ÆÛÆ÷¸Õ½º Áõ°­ ÇÊ¿ä)
±èÁ¦¿¬ 2019-02
ÇÏµå º£µå³­°Å ¾Æ´Ñ°¡¿ä ?
¿Ã·ÁÁֽŰŠº¸¸é.. Çϵ峪 ..
³×Æ®¿öÅ© ´ë¿ªÆø ³²¾Æµµ´Â°Å °°Àºµ¥..
cpu µµ ³î°í ÀÖ°í ..


QnA
Á¦¸ñPage 1773/5689
2015-12   1546617   ¹é¸Þ°¡
2014-05   5010952   Á¤ÀºÁØ1
2015-01   3948   ±è¹ÎöGC
2015-04   3948   ³ªÆÄÀÌ°­½ÂÈÆ
2016-01   3948   BJÈÄ´Ì
2018-05   3948   ¿ø½ÃÀÎ7
2018-07   3948   s±èÁ¾È­z
2015-12   3948   Á¶ÀçÇü3
2014-03   3948   ¹Ì¼ö¸Ç
2018-09   3948   ghost
2016-09   3948   ÀÌõdz
2018-05   3948   Á¶ÀçÇü3
2020-02   3948   Ȧ¸¯0o0
2016-01   3948   ǪÇÏÈ÷
2017-05   3948   ȲÁø¿ì
2016-03   3948   ¹Ì¼ö¸Ç
2018-02   3948   ±è¹Î¼®salsal
2014-06   3948   ÅõÇìµå
2015-11   3948   ¸Ó¶óÄ«´Âµ¥
2016-06   3948   NAS°íÀå³µ´Ù¡¦
2016-08   3948   Á¦·Î³ªÀÎ
2014-03   3948   ¿¹»ó¾Æºü