지난 글
http://www.2cpu.co.kr/network/14347
--------------------------------------------------
지난 글 요약
10G 랜카드를 연결한 PCIE 슬롯 기준으로 보면
메인 PC 서브 PC
PCIE X 1 라이저 : PCIE X 8 = 410 MB/S
PCIE X 4 : PCIE X 1 라이저 = 360 MB/S
PCIE X 4 : PCIE X 8 = 520 ?? MB/S 이상 ( 예상은 700-800 MB/S 나오지 않을까 싶은 )
( SATA SSD와 usb ssd를 동시에 돌렸으면 대역폭 최대치 측정가능했을텐데 실제로는 그렇게 쓸일이 없다보니 ... 깜박함 )
Dell - Broadcom 57810s Dual-port,sfp+ 10gb 는 호환성을 탐.
[ B75M-D3H에서 에러 발생 , A520M-S2H는 부팅중 Detecting에서 멈춤 근데 PCIE X 1 라이저를 통하면 에러없이 정상 사용가능 , X570 arous elite 아무문제 없음 ]
--------------------------------------------------------------------------------------------------
델 카드는 PCIE 2.0 이었기에 PCIE X 1 라이저 에서는 410 MB/S 또는 360 MB/S 가 최대 치였습니다...
이번엔 PCIE 3.0을 지원하는 MCX311A-XCAT CX311A ConnectX-3 10G 이 제품을 두개 구입하였고...
이번엔 제 메인 PC만 PCIE X 1 라이저에 연결하고 델 카드에서 문제가 있었던 B75M-D3H에 연결해 테스트 해보았습니다.
[ B75M-D3H 는 윈도우11( TPM 우회 설치) 되어 있음]
두 PC 처음에는 이상없이 부팅음이 정상이었는데 윈도우 비밀번호창 입력하려고 하면 멈추더군요...
껐다 다시 켜봐도 그렇고...
처음 2번은 그렇다가.... 3번째 다시 부팅하니 정상적으로 다 작동합니다...
10G 랜카드는 다른 PCIE 카드 들과 다르게 ... 부팅할때 뭔가를 하는데.... 그게 뭔가 깔끔하진 않은 느낌입니다.
이게 메인PC 서브PC 똑같이 그랬는데... 일단 3번째 부팅부터는 문제가 없네요...
펌웨어 문제인가 싶기도한데... 업데이트 할려고 펌웨어 받아보니 바이너리 파일만 있어서 어떻게 업데이트 하는지 잘 모르겠네요.
어째튼 3번째 부팅부터는 제대로 동작하기에 .... 공유폴더 설정하고 파일 복사 테스트를 해보았습니다..
PCIE X 1 라이저 를 사용한 메인 PC에서 서브 PC (PCIE 2.0 X4 )로 복사할때는 평균 속도 670 MB/S 정도 나왔습니다...
[ 대역폭을 최대로 쓰기 위해 SATA SSD와 레이드5 드라이브에 동시에 쓰기를해서 속도를 체크했습니다. ]
[ 흥미로운건 레이드5로 묶은게 성능이 700 MB/S 까지 나오네요... 그래서 단일 레이드 드라이브 쓰기할때도 670 MB/S 가 나왔습니다 ]
반대로 서브 PC에서 메인PC로 복사를 해본 결과 평균 755 MB/S가 나왔습니다...
[ 전 테스트와 마찬가지로 대역폭을 최대로 쓰기 위해 SATA SSD와 레이드5 드라이브에 동시에 읽어서 테스트 했습니다 ]
레이드5만 사용했을때는 700 MB/S 가까이 나오더군요...
이유는 잘 모르겠지만 PCIE X 4를 이용해 읽고 PCIE X 1 라이저쪽으로 보내는게 80-100 MB/S 더 빨랐습니다....
아 그리고 깜박잊고 테스트 안한게 있습니다 점보 프레임 9014로 설정하는걸 깜박했네요
그걸한 테스트도 다시 추가
---------------------------------------------------------------------------
---------------------------------------------------------------------------
정리 하자면
MCX311A-XCAT CX311A ConnectX-3 10G
복사 성능
메인 PC PCIE X 1 라이저 (PCIE 3.0) -> 서브 PC PCIE X 4 (PCIE 2.0) : 670 MB/S (평균)
서브 PC PCIE X 4 (PCIE 2.0) -> 메인 PC PCIE X 1 라이저 (PCIE 3.0) : 755 MB/S (평균)
점보 프레임 9014로 설정
메인 PC PCIE X 1 라이저 (PCIE 3.0) -> 서브 PC PCIE X 4 (PCIE 2.0) : 780 MB/S (평균)
서브 PC PCIE X 4 (PCIE 2.0) -> 메인 PC PCIE X 1 라이저 (PCIE 3.0) : 820 MB/S (평균)
---------------------------------------------------------------------------
---------------------------------------------------------------------------
일반적으로 메인보드를 사면 PCIE X 1 슬롯을 몇개씩 주는 경우가 많은데 활용하기가 쉽지 않습니다.
그래서 라이저 PCIE X 1 슬롯를 활용하고 1:1로 나스나 다스에 10G 속도로 연결해서 쓰고 싶은분에게는
PCIE 3.0 랜카드를 쓰면 780 MB/S - 820 MB/S (점보 프레임 9014 설정) 까지 성능으로 활용할수 있다는점을 테스트에서 알 수 있었습니다.
다른분들에게도 도움이 됐으면 좋겠네요.
´ëºÎºÐ ¼¹ö¿¡ µé¾î ÀÖ´Ùº¸´Ï, Àß µ¹¾Æ°¡¸é °Çµå¸®Áö ¾Ê°í ±¸¹öÀü ±×´ë·Î »ç¿ëÇϱ⠶§¹®¿¡...
¸á¶ó³ì½º Æß¿þ¾î Åø(MFT) ¼³Ä¡ÇÏ°í,
¼³Ä¡µÈ Æú´õ·Î °¡¼Å¼ mlxup ¸í·ÉÀ» ½ÇÇàÇϸé ( ´Ü, °ü¸®ÀÚ ±ÇÇÑÀ¸·Î ½ÇÇà ÇÊ¿ä )
ÀÚµ¿À¸·Î ÃֽŠÆß¿þ¾î·Î ¾÷µ¥ÀÌÆ® µË´Ï´Ù.
Æß¿þ¾î ¹ÙÀ̳ʸ® ÆÄÀÏ ¹ÞÀ¸¼ÌÀ¸¸é flint ¸í·ÉÀ¸·Î ¼öµ¿À¸·Î ¾÷µ¥ÀÌÆ®ÇØ¾ß Çϱ¸¿ä.
mlxuptime.exe
ÀÌ°ÅÄ¡¸é µÉ±î¿ä?
https://network.nvidia.com/support/firmware/mlxup-mft/
-E- mst service failed: Could not open the SC Manager
-E- No devices found or specified
Press any key to continue ... (To suppress pause re-run with --sfx-no-pause flag)
mst service failed - SC manager°¡ ¹» ¸»ÇÏ´ÂÁö ¸ð¸£°Ù³×¿ä
mst°¡ µé¾îÀÖ´Â WinMFT ¼³Ä¡ Æú´õ¿¡ Ä«ÇÇÇؼ ½áµµ ¸¸Âù°¡ÁöÀÔ´Ï´Ù.
¹Ú¹®Çü´Ô ´ñ±ÛÁß mlxup ÅøÀ» µû·Î ¼³Ä¡ÇÏ´Â ¸µÅ©°¡ Àֳ׿ä.
https://network.nvidia.com/products/adapter-software/firmware-tools/
¿¾³¯¿¡ À©µµ¿ìÁî 10¿¡¼ ¾÷µ¥ÀÌÆ® Çß´ø °ÍÀ¸·Î ±â¾ïÇÕ´Ï´Ù..
Àúµµ »ì¸®°í ÀÖ´Â Ä«µå°¡ ÀÖ¾î¼ Á¶¸¸°£ Çغ¼ °Í °°½À´Ï´Ù..
¸á¶ó³ì½º Ä«µå°¡ ¿ø»êÁö°¡ À̽º¶ó¿¤·Î ±â¾ïÇϴµ¥ Á¦°¡ °¡Áø CX311A´Â Áß±¹»êµµ ÀÖ½À´Ï´Ù..
CX311A Ä«µå ¿ø»êÁö Ç¥½Ã´Â SFP+ Æ÷Æ®¿¡ ½ºÆ¼Ä¿·Î ºÙ¾î ÀÖÀ» °ÍÀÔ´Ï´Ù..
¹æ¿Æǵµ Èò°Í °ËÁ¤°Í 2°¡ÁöÀÔ´Ï´Ù..
¹æ¿ÆÇÀº ¼¯¾î »ç¿ëÇÏ´Â µí..
À©µµ¿ì¿¡¼ Æß¿þ¾î ¾÷µ¥ÀÌÆ® ÇÏ´Â ¹æ¹ý ±¸±Û °Ë»öÇصµ °ÅÀÇ ¾È³ª¿À³×¿ä
±×Áö°°Àº ¾î¶² SSD Æß¿þ¾î ¾÷µ¥ÀÌÆ®µµ ÄܼÖâÀ¸·Î ÇؾßÇϴ°űîÁö ÇغÃÁö¸¸
°Å±â ¸Þ´º¾ó¿£ ¾î¶»°Ô ÇؾßÇÏ´ÂÁö example±îÁö ³ª¿ÍÀִµ¥...
À̳ðÀÇ °ÍÀº ±× ½¬¿î Æß¿þ¾î ¾÷µ¥ÀÌÆ® ¹æ¹ý ¿¹Á¦°¡ ¾È³ª¿Í Àֳ׿ä..
±×³É ¸®´ª½º ¹öÀü°É º¸°í Çϴµ¥... Àß ¾ÈµË´Ï´Ù.
¾Æ·¡´Â ¸á¶ó³ì½º CX354A °æ¿ìÀÔ´Ï´Ù.
mst status ·Î µð¹ÙÀ̽ºid È®ÀÎ
C:\Windows\system32>mst status
MST devices:
------------
mt4099_pci_cr0
mt4099_pciconf0
ÇÊ¿äÇÏ´Ù¸é Ä«µå ¼¼ºÎÁ¤º¸ È®ÀÎ (Æß¿þ¾î µî)
flint -d mt4099_pci_cr0 query
Æß¿þ¾î ¾÷µ¥ÀÌÆ®
flint -d <µð¹ÙÀ̽ºid> -i <Æß¿þ¾î>
flint -d mt4099_pci_cr0 -i Æß¿þ¾î.bin burn
flint -d mt4103_pci_cr0 -i Æß¿þ¾î.bin burn
°¨»çÇÕ´Ï´Ù.
[ Âü°í·Î ¿ø·¡´Â 2.35 ¹öÀüÀ̾ú½À´Ï´Ù ]
C:\Program Files\Mellanox\WinMFT>flint -d mt4099_pci_cr0 query
Image type: FS2
FW Version: 2.42.5000
FW Release Date: 5.9.2017
Product Version: 02.42.50.00
Rom Info: type=PXE version=3.4.752
Device ID: 4099
Á¡º¸ ÇÁ·¹ÀÓ¾²´Ï 80-100 MB/S ¼º´ÉÂ÷±â È® ÁÙ¾ú½À´Ï´Ù... ¼Óµµµµ ¹«·Á 820 MB/S±îÁö ³ª¿É´Ï´Ù.
ÀüÀÇ ´Ù¸¥ Ä«µåµé°ú °£´ÜÈ÷¶óµµ ºñ±³ÇØÁÖ½Ã¸é °¨»çÇÏ°Ú½À´Ï´Ù..
Dell - Broadcom 57810s Dual-port,sfp+ 10gb ˼
ȣȯ¼ºÀ» ź´Ù´Â°Ô Á» ¾Æ½±°í...
PCIE X 1¸¦ È°¿ëÇؾßÇÒ °¡´É¼ºÀÌ ³ôÀº À¯Àú PC¿¡¼± 2.0 ¹öÀüÀ¸·Î´Â ¼º´ÉÀ» È°¿ëÇϱⰡ ¾î·Æ´Ù´Â°ÍÀÔ´Ï´Ù..
±×¸®°í ³¢¿öº¸±âÀü¿£ ȣȯ¼ºÀ» ¾Ë¼ö°¡ ¾ø¾î¼.....Âü ³°¨Çϳ׿ä
PCIE ½½·ÔÀÌ ³Î³ÎÇÏ°í ȣȯ¼º¸¸ µÈ´Ù¸é , ½Ñ¸À¿¡ ³¢¿ï¸¸ÇÏÁö¸¸....
ÆÒ¼ÒÀ½ÀÌ ¹ÌÄ¡µµ·Ï Å©°í ÀÛÀº ÆÒ¿¡¼ ÀÌ·± dz·®ÀÌ ³ª¿À´Ù´Ï...
¾î°ư ÀÌ·± ÀÛÀºÆÒÀ¸·Î ÀÌ·± RPMÀ» µ¹¸®´Â°Ô ¸Â³ª ½Í³×¿ä...
¾îÂ÷ÇÇ 2Æ÷Æ®Áß 1°³¸¸ ¾µ°Å¸é....±×·¸°Ô ¹ß¿ÀÌ Å©Áö ¾ÊÀ»°Å °°Àºµ¥.. Äð¸µÆÒ ¶ì¾îµµ µÉ°Å °°Àº ´À³¦ÀÔ´Ï´Ù..
µ¨ Ä«µå´Â
ÀÎÅÚ 4¼¼´ëÀÌ»ó , ¿©ºÐÀÇ PCIE X 2 ÀÌ»ó »ç¿ë ½½·ÔÀÌ ÀÖ´Ù¸é , ÃæºÐÈ÷ ±¦Âù°ÚÁö¸¸ ¸ÞÀκ¸µå¿¡¼ ±×·¸°Ô Áö¿øµÇ´Â Á¦Ç°ÀÌ ÈçÄ¡´Â ¾Ê¾Æº¸ÀÔ´Ï´Ù.
´ÙÀ½À¸·Î
¸á¶ó³ì½ºÀÇ MCX311A-XCAT CX311A ConnectX-3 10G ´Â ±²ÀåÈ÷ ÀÛ°í ±Í¿±½À´Ï´Ù...
¹æ¿ÆǸ¸ ´Þ·ÁÀִµ¥... ¹ß¿ ¹®Á¦°¡ ÀÖÀ»±îºÁ...
¿Âµµ ÃøÁ¤À» Çغ¸°í ½Í¾îµµ HWINFO·Î´Â °Ë»ö¾ÈµÇ³×¿ä.
·£Ä«µå 10G - 820 MB/S Ç®·Î »ç¿ëÇÒ¶§
±×³É ¹æ¿ÆÇ ¸¸Á®º¸´Ï±î Á¶±Ý µûµíÇÑ ´À³¦ÀÌ µé´øµ¥... 40-50µµ?
PC ÄÉÀ̽º Äð¸µÀÌ ÀߵǾî ÀÖ´Ù¸é ½Å°æ¾µ ¹ß¿Àº ¾Æ´Ñ°Å °°¾Ò½À´Ï´Ù.
ȣȯ¼ºÀº ¾ÈöÇö´ÔÀÌ ¸»¾¸ÇϽŵ¥·Î ÁÁÀº°Å °°½À´Ï´Ù.
Á¦ ¼ºê PCÀÇ ¸ÞÀκ¸µå B75M-D3H ¿¡¼µµ Àß µ¹¾Æ°¡³×¿ä
±×¸®°í ÆǸŻ翡¼´Â À©µµ¿ì11¿¡¼µµ ÀνÄÇÑ´Ù°í ÇÕ´Ï´Ù.
°¡ÀåÁß¿äÇÑ°Ç PCIE 3.0 À̱⶧¹®¿¡
PCIE X 1 ½½·Ô¿¡¼µµ 820 MB/S±îÁö ¾µ¼ö ÀÖ´Ù´ÂÁ¡ÀÔ´Ï´Ù...
¸¹Àº ¸ÞÀκ¸µå°¡ PCIE X 1¸¦ Á¦°øÇÏÁö¸¸ È°¿ëÇϱⰡ ¸¸¸¸Ä¡ ¾Ê´Ù´ÂÁ¡¿¡¼...
PCIE X 1 ¶óÀÌÀú¸¸ ÀÖ´Ù¸é 10G ¸¦ °ÅÀÇ Ç®·Î »ç¿ëÇÒ¼ö ÀÖ´Ù´ÂÁ¡Àº ¹ÌÄ¡µµ·Ï ÈǸ¢ÇÕ´Ï´Ù.
PCIE 2.0 Ä«µå·Î´Â ³ÑÀ»¼ö ¾ø´Â °æÁö³×¿ä...
´Ù¸¸ óÀ½ ºÎÆà 1-2¹øÀº ·£Ä«µå ÀνĶ§¹®ÀÎÁö À©µµ¿ì ·Î±×ÀΠȸ鿡¼ ¸ØÃß°í...
±×ÈĺÎÅÍ Á¦´ë·Î µ¿ÀÛÇß´Ù´ÂÁ¡ÀÔ´Ï´Ù...
ÀÌ°Ç ¸ÞÀÎPC ¼ºê PC ¶È°°ÀÌ ¹ß»ýÇÑ ¹®Á¦Àε¥... Æß¿þ¾î ¹®Á¦ÀÎÁö´Â Àß ¸ð¸£°Ú½À´Ï´Ù.
Á¦Á¶»ç¿¡°Ô ¹°¾îº¸´Ï Æß¿þ¾î°¡ ÃÖ½Å°Ç ¾Æ´Ï´õ±º¿ä...
ÃÖ½ÅÀ¸·Î Æß¿þ¾î Çß´Ù¸é ¾Æ¿¹ ÀÌ·± ¹®Á¦°¡ ¹ß»ýÇÏÁö ¾Ê¾ÒÀ» °¡´É¼ºµµ ÀÖ½À´Ï´Ù.
ºê·ÎµåÄÄ Á¦Ç°Àº ¾Æ¸¶ Á¦ÀÛµÈÁö °ÅÀÇ 5³â ÀÌ»ó 10³â ¹Ì¸¸ µÇ¾úÀ» °ÍÀÔ´Ï´Ù..
Ææµµ ¸î ³âÀº µ¹¾Æ°¬À»ÅÍÀÌ´Ï ¸ÕÁö ¸Ô¾î¼ ¼Ò¸®°¡ ½ÉÇÒ °ÍÀÌ°í¿ä..
¿³ª´Â ·¹À̵å Ä«µå ¸Þ´º¾ó¿¡ º¸¸é È÷Æ® ¾ÅÅ©¿¡ dz¼Ó ¸î¸î CFM ÀÌ»óÀ¸·Î ¹Ù¶÷À» ½ý¾î¾ß ÇÑ´Ù°í ³ª¿É´Ï´Ù..
±× Á¶°ÇÀ» ¸¸Á·½ÃÅ°´Â °ÍÀº ½Ã²ô·¯¿î ¼¹ö ¹Û¿¡ ¾ø½À´Ï´Ù..
¹æ¿ÆǸ¸ ´Þ¸° ·£Ä«µåµéµµ ¹Ù¶÷À» ½ý¾î¾ß ÇÏ´Â °ÍÀº ¸¶Âù°¡ÁöÀÔ´Ï´Ù..
ÃֽŠÆß¿þ¾î°Å 2017³â 9¿ùÀÌ´øµ¥...
À©µµ¿ì 11¿¡¼µµ Àß Àνĵǰí ÀÌÁ¤µµ¸é ¾ÕÀ¸·Îµµ ÃæºÐÈ÷ ¹®Á¦°¡ ¾øÀ»°Å °°Àº ´À³¦ÀÔ´Ï´Ù.
¹ß¿Àº ¹®Á¦°¡ µÉ¸¸Å ºý¼¼°Ô µ¹¸±ÀÏÀº ÈçÄ¡¾Ê¾Æ¼... ¹ß¿·Î ¾²·ÎƲ¸µ °É¸®¸é ±×¶§ Á» ½Å°æ½áÁÖ¸é µÉ°Å °°¾Æ¿ä
°Å±â¿¡ °ç´Ù¸®¶ó°í º¼ ¼ö ÀÖ´Â ·£Ä«µå¸¦ Â÷Ãû µ¶¸³ Á¦Ç°À¸·Î ¸¸µé±â ½ÃÀÛÇߴµ¥
ÀÌ°Ô ´Ù¸¥ ȸ»ç Á¦Ç°º¸´Ù ¼º´ÉÀÌ °°°Å³ª ÁÁÁö¸¸ ´Ù¸¥ Á¦Á¶»ç Á¦Ç°º¸´Ù ¿ÀÌ Àû°Ô ³ª´Â°Ô Ư¡ÀÌ¿´½À´Ï´Ù..
Àڱ⸸ÀÇ ±â¼úÀ» °¡Áö°í ÀÖ´Â °ÍÀÌÁÒ..
±×¸®°í ÀÌ ¸á¶ó³ì½º Ä«µå Á¦Ç°±ºÀº À̺£ÀÌ µÚÁö¸é Áß°í Á¦Ç°ÀÌ ¾öû Àú·ÅÇÑ °¡°Ý¿¡ ¼öµµ ¾øÀÌ ³ª¿É´Ï´Ù..
±×¸®°í °ÅÀÇ ¸ðµç Á¦Ç°ÀÌ Á¦Á¶»ç ÀÎÁõÀ̶ó ¼öÀÔÇÒ ¶§µµ ÆíÇÕ´Ï´Ù..
°á±¹ Áß±¹¿¡¼ ¹è¼ÛÇϴ°Ŷó ¹è¼Ûºñµµ ¹«·á... ³î¶ø³×¿ä..
¿©±â¼ »òÀ¸¸é ´õ ½Î°Ô »ç´Â°Å¿´³×¿ä.
Ưº°È÷ ÀåÄ¡ÀνĿ¡ ¹®Á¦³ª³ª ºÎÆà °úÁ¤¿¡¼ ¹ö¹÷°Å¸²Àº ¾ø¾ú½À´Ï´Ù.
È®½ÇÇÑ°Ç Á¦ ¸ÞÀÎ PC¶û ¼ºê PC°¡ óÀ½ 1-2¹øÀº À©µµ¿ì ·Î±×ÀÎâ¿¡¼ ¸ØÃè½À´Ï´Ù.
¾Æ¸¶µµ óÀ½ ºÎÆö§ ·Ò¿¡ ¹º°¡ ÀνĽÃÅ°´Â ÀÛ¾÷À» Çϴ°Š°°Àºµ¥...
±×°Ô ¹®Á¦°¡ ÀÖ¾ú´ÂÁö... 2¹øÁ¤µµ ±×·¸°Ô ÇÏ¸é ·Ò¿¡ ¿ÏÀüÈ÷ ÀÎ½ÄµÇ´Âµí º¸ÀÔ´Ï´Ù.
3¹ø° ºÎÆà ÀÌÈÄ Áï 4,5¹ø° ºÎÆà ÀüºÎ ±ò²ûÇÏ°Ô ºÎÆõƽÀ´Ï´Ù
ÀÌÀü ±Û¿¡ ¼³Á¤ÇÑ ³»¿ëÀÌ ÀÖ¾ú½À´Ï´Ù.
¸á¶ó³ì½º´Â ±×°Å ¾ÈÄѵµ ¾î´ÀÁ¤µµ ¼º´ÉÀÌ ³ª¿À´Âµ¥ Dell OEMÀº ¼º´ÉÀÌ 2.5G ¼öÁØÀ¸·Î¸¸ ³ª¿À´õ±º¿ä
dell OEMÀº Á¡º¸ ÆÐŶÀΰ¡¸¦ Ŭ¸¯Çϸé 9014¸¦ ¼±ÅÃÇÒ¼ö ÀÖ¾ú´ø°Å °°½À´Ï´Ù.
¸á¶ó³ì½º´Â Á¡º¸ ÆÐŶÀ» ´©·ç¸é ¼öµ¿À¸·Î 9014¸¦ Ãƾî¾ßÇß°í¿ä.
+ À©µµ¿ì 11¿¡¼´Â mst statusÇصµ ÀνÄÀÌ ¾ÈµÇ´Â °æ¿ì°¡ ÀÖÀ¸´Ï Âü°íÇϼ¼¿ä. (ÀÛµ¿Àº Á¤»óÀûÀ¸·Î µÊ)
À©µµ¿ì 10¿¡¼´Â Á¤»óÀûÀ¸·Î ÀÎ½ÄµÇ°í ¾÷µ¥ÀÌÆ® µË´Ï´Ù