안녕하세요.
제목대로 10G랜 업로드시 속도랑 다운로드시 속도입니다.
업로드시 속도가 1G~600MB로 떨어지는 이유가 뭘까요?
10기가 정도까지는 속도저하없이 1G 유지되고요 10G 이상 업로드시만 속도차이가 생기네요.
업로드쪽 PC랜은 보드 내장 x550 듀얼 pm9a1 1T
다운로드쪽 PC랜은 x540 듀얼포트 랜카드 pm9a1 500G입니다.
답변 부탁드립니다. 감사합니다.
아래는CrystalDiskMark 네트워크 드라이브 속도테스트입니다.
한쪽이 중간에 물결치듯이 들쑥날쑥하는건,
스토리지 버퍼가 네트워크 전송속도를 따라가지 못해서 발생하는 현상입니다.
파일 전송속도 테스트 이전에
네트워크단 속도를 iperf3 등으로 점검하시면
좀더 문제를 단순화할 수 있습니다.
답변 감사드립니다.
평균 5~6G 정도 나오고, 10기가 파일 전송정도까지는 10G 풀로나오는 상황이라면
만족하셔도 될 듯합니다.
항상 그렇듯이 70~80 목표까지는 쉬운데,
나머지 10~20% 고지, 특히 최종 5~10%를 점령하려면 많은 비용과 시간이 들기 마련입니다.
답변 감사드립니다.
정확한 테스트를 하려면 양쪽 컴퓨터 둘다 SSD나 HDD가 아닌 램드라이브에서 파일을
전송하도록 테스트해보세요.
파이프의 수압이 낮으면 수도꼭지가 아무리 굵어도 물이 콸콸 다 나오기 힘든것처럼요.
웬만한 스토리지로는 10G 속도 풀스피드를 감당을 못합니다.
답변 감사합니다.
원래 그렇다라고 보시면 됩니다..
한쪽에 뭔가 문제가 있지 않을까해서 질문드렸습니다.
조금전 100기가 양쪽으로 테스트 해봤는데 한쪽으로는 일정하게 1G가 나옵니다.
한쪽은 들쭉날쭉 하고요. 조금 더 파보겠습니다.
답변 감사합니다.
파일 전송 속도 0.6~1GBbps이니 5~8Gbps 정도이므로
전송 자체에는 큰 문제가 없는 것 같습니다.
조금더 파 보겠습니다.
답변 감사합니다.
양쪽 컴퓨터의 랜이 PCIe Gen2 혹은 3 8배속으로 동작하는지도 확인하세요..
요지는 양쪽 랜카드를 똑같은 환경으로 셋팅해보라는 것입니다..
무슨 보드인지는 모르겠지만 일반 PC보드에서 PCIe 8x 슬롯이 단독으로 나오는 경우는 드물며 보통 PCIe 16배속에 꼽아 사용하던가
슬롯모양만 16배속이고 실제 신호는 4배속으로 동작할 확률이 있기 때문입니다..
문제가 될까요?
내용 확인해보시고
실제 동작이 어떻게 되는지가 중요합니다..
저렇게 되면 X540 카드는 PCIe 2.1 4배속으로 동작합니다..
물론 10G 카드중에 PCIe 4배속 짜리 카드도 있지만 PCIe 8배속 카드는 8배속으로 동작해야 한다는게 저의 생각입니다..
그리고 전반적으로 UTP 10G 랜들은 열이 마니 납니다.. 펜없이 그냥 방치하면 나중에 칩셋이 열에 눌어서 고장나는 경우도 있습니다..
방열펜을 다는 것이 필수입니다..
3.0x4 배속이 문제였네요.감사합니다.
윗쪽에 120미리 팬 돌려놓았습니다.
답변주신 모든분 감사합니다.
그런데 업로드는 대상컴퓨터가 그냥 메모리 캐쉬 안타고 다이렉트로 스토리지에 액세스 하게되는데 이건 순수 스토리지 속도에 달려 있습니다.
저런거 속도 제대로 나오게 할려면 메모리 캐쉬 써보면 답나옵니다. 참고로 메모리 대 메모리로 보내는건 RDMA가 작동해서 네트워크 풀속도 땡겨가게 됩니다.
다운로드 할때 작업관리자 열어보세요 메모리 사용율 올라가나 안올라가나...
감사합니다.
연결 과정에서 QP(Queue Pair) 할당과 MR(Memory Region) 할당이 필요하고, 모든 RDMA 애플리케이션은 IB Verb API를 사용합니다.
RDMA 지원 어댑터 + RDMA 지원 인터커넥트 + IB API를 사용한 애플리케이션이 모두 모여야 RDMA 전송이 됩니다.
제일 먼저, 대부분의 일반 사용자는 IB 지원 HCA를 사용하지 않습니다. 예시로, 질문자가 사용하는 X550의 경우에는 Ethernet 환경에서 사용할 수 있는 iWARP를 지원하지 않는 어댑터입니다.
다음으로, Windows 10에서는 SMB Direct를 사용할 수 없습니다. 제가 마지막으로 알아봤을 때 Windows 11 후기 빌드에서 RDMA API 지원이 추가될 예정이라고 했던 것 같은데, 실제로 추가되었는지는 잘 모르겠네요. 그래서 RDMA 컨설팅 할 때도 윈도우 환경에서는 무조건 윈도우 서버를 사용해야 한다고 가이드를 했습니다.
마지막으로, OS와 어댑터, 애플리케이션이 모두 RDMA를 지원하더라도, 패브릭이 Lossless Fabric이 아니면 RDMA의 이점을 제대로 누리기 어렵습니다. congestion 상황이 생겼을 때 packet drop이 발생하기 때문입니다.
RoCE 지원 어댑터/스위치 + 양 쪽에서 Windows Server를 사용하는 일반 사용자가 몇이나 될지 모르겠네요. 물론 스위치 구성도 필요하구요
그거 넘어가면 512gb짜리는 700MB/s, 1T짜리는 1000MB/s 정도로 평균 쓰기 속도 하락합니다.
이부분도 체크해보시면 좋을 것 같습니다.