PC-NAS간 데이터 전송 속도가 제대로 나오지 않는것 같습니다

   조회 3670   추천 0    

PC는 AMD 5900X X570보드 파이어쿠다 5302TB 순차읽기, 쓰기 6.5GB/S 정도되고

NAS는 I5-11400 PM981A 1TB X 2 RAID0 순차읽기, 쓰기 5.3GB/S 정도 나옵니다.

멜라녹스 40G 듀얼에 링크 어그리게이션 적용하여 다이렉트로 연결하였습니다. 

440GB 단일 파일을 복사하는데 1.68GB/S 밖에 안나옵니다.

디스크이용율이 1.68GB/S 밖에 안되는데 89%로 나오것도 좀 이해가 안갑니다.  

예상으론 적어도 3GB/S는 넘을거라고 생각했는데 이정도가 한계일까요?

짧은글 일수록 신중하게.
박문형 2022-02
잘은 모르지만

M.2가 어디에 어떻게 연결되었는지도 속도에 영향을 줄 듯 합니다..

사용하시는 보드 모델의 블럭 다이어그램을 구해서 확인해보세요..

M.2가 CPU에 직결되어 있고 40G 랜카드가 CPU에 직결이 되어 x8 로 동작한다면 이게 최대 대역폭입니다..

X570 블록다이어그램 구글링해서 보시면 대략 아시겠지만 M.2 하나는 CPU에 직결 M.2 나머지 하나는 X570 직결 입니다..

그리고 CPU와 X570 칩셋 사이는 의미는 조금 다르지만 PCIe x4로 연결되어 있죠..

여기서 병목현상이 일어날 수 도 있습니다..

M.2 슬롯도 어떤 모델은 x2로 연결되는 제품이 있고 x4로 연결되는 제품이 있습니다..
     
현정사랑 2022-02
X570은 M2가 CPU에 직결 PCIE 4.0 X4로 되어 있습니다. 대역폭은 8GB/s가 되겠네요.
나스는 W480인데 M.2 커넥터 1개(소켓 3, M 키, 유형 2242/2260/2280/22110 PCIe x4/x2 SSD지원) (M2Q_CPU),
M.2 커넥터 1개(소켓 3, M 키, 유형 2260/2280 SATA 및 PCIe x4/x2 SSD지원) (M2A_SB) 이라고 되어있네요.
이론상으론 3.94GB/S가 나와야하나 CPU, 칩셋간 병목현상인지 모르겠지만 속도가 절반도 안나오네요....
박문형 2022-02
제가  생각해봐도 보통 NAS는 최대 파일 전송시 속도는 대략 가장 낮은 대역폭의 절반 정도로 생각합니다..

즉 5.3 /2 = 2.65 정도는 비슷하게 나와줘야 하는데 라고 말입니다..
술이 2022-02
제가 테스트를 해보니 익스프레스 병목현상 맞습니다.
40G에서 다이렉트로 NVME에 쓰기를 하니 속도가 확 떨어져버리네요. 실제 탐색기는 메모리에 데이터 올라갔다가 디스크에 저장되는 순서여서 저건 믿을게 못되고 카피툴로 측정해봐야 합니다.
순수하게 SMB 스토리지대 블럭 스토리지 40G 네트워크만 썼을때는 속도가 안줄었지만 다른 익스프레스 저장장치를 통하는 복사는 속도가 반이상 줄어버리네요.
아마 데스크탑 익스프레스 대역폭 한계인거 같습니다.
전 16배속에 40G 네트워크 카드 꼽았고 보드는 B550 입니다.
     
현정사랑 2022-02
멜라녹스가 원인인지도 생각해봤는데PC는 X570 PCIE 3번째 슬롯에  설치했으니 4.0 X8 인듯 합니다.
나스는 W480 PCIE 2번째 슬롯이고 3.0 X8 이니 멜라녹스는 문제가 없을듯 합니다.
'순수하게 SMB 스토리지대 블럭 스토리지 40G 네트워크만 썼을때' 라는것이 정확하게 이해가 가지 않아서 찾아봤는데
개인이 구축하기 불가능하겠네요...
          
술이 2022-02
대역폭 문제입니다. 순수하게 스토리지 IO 테스트하면 속도 풀로 다 나옵니다. 그런데 스토리지 데이터를 NVME에 넣을려고 하면 NVME 속도가 반토막 이상 떨어져버리네요.
NVME 저장장이 안에서만 속도 처리는 문제가 없으나 동시에 40G 네트워크를 사용하면 점유율 확 떨어지는게 눈에 보입니다.
          
술이 2022-02
X570 보드가 VGA 16배속이고 나머진 전부 4배속입니다. 3.0 4배속이면 잘나와야 3G 인데 두개 링크 활성화 시켜버렸으니 반으로 쪼개진거 같네요.
그리고 마지막 슬롯은 4배속이 아니고 2배속인 보드도 있습니다.
전 40G 대역폭 그대로 사용하게 할려고 16배속 슬롯에 꼽은겁니다.
박문형 2022-02
멜라녹스 카드 모델이 무엇인가요??
     
현정사랑 2022-02
CX354A-FCBT HP OEM 입니다
          
박문형 2022-02
https://network.nvidia.com/related-docs/prod_adapter_cards/PB_ConnectX3_VPI_Card.pdf

카드스팩상 PCIe Gen3 입니다..

별 문제 없다면 우선은 그냥 사용하시는 것을 권장해드리고 그 외에 할수 있는 것은 사실 거의 없습니다..

랜카드 슬롯 바꾸기 정도죠..

그렇다고 레이드 카드 달고 대형 스토리지를 달고 하는 것은 돈만 들어갈 수 있습니다..
제온프로 2022-02
멕시넘 속도 잘 나오고 있네요..
엄청나네요..
VSPress 2022-02
저는 하드디스크 기반이긴 하지만 쓰기속도 400MB/s만 나와줘도 엄청 빠르다고 만족하며 사는데.. 신세계가 있었군요 ㅎㅎ


QnA
제목Page 601/5724
2015-12   1761320   백메가
2014-05   5234958   정은준1
2022-02   2828   미프
2022-02   1695   ComAreMot
2022-02   1930   겨울나무
2022-02   2501   Sikieiki
2022-02   4296   잡식
2022-02   3766   하퍼데일
2022-02   1959   정의석
2022-02   1709   여수I완스
2022-02   1892   김대평
2022-02   3618   찌록
2022-02   2578   화란
2022-02   2059   isaiah
2022-02   6689   펜듀얼
2022-02   1788   눈부신아침
2022-02   1627   stones
2022-02   2579   이승익
2022-02   6353   drama
2022-02   2150   qww233
2022-02   1657   meviesta
2022-02   3671   현정사랑