쪽팔리면 질문하지 맙시다. 소중한 답변 댓글을 삭제하는건 부끄러운 일 입니다
현재 문제는 scp로 파일 전송 시 900Mbps에 속도 제한이 걸려버리는 문제 입니다.
RHEL 9.2 Minimal Install 환경 입니다.
윈도우 서버에서 리눅스로 scp 명령을 통해 파일을 보내는 상황입니다.
iperf 날려보면 40Gbe 인터페이스에선 31Gbps, 10Gbe 인터페이스에선 9.75Gbe 나오는거로 정상적인 작동 확인 됩니다.
40Gbe NIC 또는 드라이버 문젠가 싶어 10Gbe로 연결을 해도 딱 900Mbps 문턱에서 컷이 걸려버리네요.
NIC 연결간 문제는 아니라는 건데,,, FTP로 파일 전송을 해보면 또 속도가 정상적으로 나와요.
DISK도 SSD 16개 레이드10으로 묶은거라 디스크 스피드에 붙잡힐 리도 없고.
그냥 FTP 계속 쓰면 되기는 한데, 속도 리밋 걸려버리는 문제가 계속 눈에 밟혀서 신경이 쓰입니다.
구글링 해봐도 scp 기능 자체에 스피드 락이 걸려있다거나 그런건 전혀 없는거로 나오는데,
혹시 관련된 정보나 튜닝법 가이드 같은게 있으면 부탁좀 드리겠습니다.
그냥 scp는 쳐다도 보지 말고 얌전히 ftp나 써야 하나 싶네요 허허...
선택적으로 테스트 가능하시다면 cpu내 AES 가속 끄고 한번 해보시는건 어떨까 합니다만
AES 암호화 자체가 부하가 꽤 걸려서 cpu로 한다고 더 빠를거라 생각되진 않습니다.
8개 속도라.....900Mbps 가 맞아요..
제가 착각함.
그래서 방법이 scp 는 파일사이즈가 작은 파일들이 엄청 많으면 대기시간이 적어서 빠르다는 말이 있습니다. 보통 우리가 많은 파일들을 복사할때 작은파일들이 많으면 최대 대역폭으로 복사가 되지 않고 파일마다 딜레이가 있어서 많이 느린것을 알수가 있습니다. 대용량 파일들이 많을 경우는 sftp 나 다른 방법을 쓰라고 권고하네요.
뭐 알겠지만 40G 속도를 제대로 땡겨가는 프로토콜은 몇가지 정해졌습니다. SMB거나 CPU와 메모리로 다이렉트로 전송되게하는 그런 종류들만 가능하고 TCP/IP 해석이 들어가야되는 프로세스들은 대역폭데로 안나오는게 맞을겁니다.
일단 멀티쓰레딩이 지원 안되기도 하고 많이 제약적이네요. 만약 scp가 GUI 유틸이 있다면 FTP처럼 멀티세션 최대값을 줘서 동시에 4-8개씩 작업하게 하면 4배에서 8배는 올라갈건데 그게 될지는 테스트를 해봐야겠네요.
SFTP도 작은파일들 많을때 동시에 4-8개 세션 처리하게 해서 작은파일들 빨리 넘기긴 했습니다. 하지만 용량이 작은거라면 scp가 더 빠를거 같네요.
SMB 프로토콜 쓰면 풀속도 다 나올듯 싶네요. 10G/40G 들이 SMB는 RDMA/패킷다이렉트 기능을 지원해서 최대속도 다 땡겨옵니다.
FTP나 계속 써야겠습니다.