안녕하세요
집에 네이티브 헤놀 918+ 용도로 쓰는 Lenovo TS140 과 데탑이 2개 있습니다
몇년전에 장터에서 2포트 oce11102 와 멜라녹스 1포트 2개 사서 DAC 케이블로 연결해서 사용 중 입니다
데탑1과 데탑2를 직결하고 iperf3 로 속도 테스트 하면 9.x Gbits/sec 정도로 정상적으로 나오는데
TS140 과 데탑 간에는 3.0 Gbits/sec 밖에 안나옵니다
점보 프레임 8000 정도 주면 3.11 Gbits/sec 이 나오구요
그래서인지 TS140 에서 데탑으로 삼바로 파일 복사시 330~350MB/s 정도밖에 나오질 않습니다
TS140 은 i3-4330 이고 PCIe 3.0 x16 슬롯에 꽂아놔서 PCIe 대역폭 문제는 아닐거라 보는데
oce11102 가 원래 3 Gbps 로 리밋이 걸려있나요?
헤놀 및 데탑 제어판에서는 네트웍 링크는 10Gbps 로 나오고 있습니다
도저히 모르겠네요... oce11102 의 바이오스도 12.0.1169.7 로 마지막 버전으로 알고 있습니다
헤놀이 문제인가 싶어서 윈도우 서버 2016 도 올려봤지만 동일하게 딱 3.0Gbps 만 나옵니다
TS140 바이오스 상엔 PCIe 속도 조절하는 메뉴는 따로 없네요
원래 oce11102 가 10G 풀로 안나오는지요? 구글에 찾아봐도 잘 모르겠네요
TS140 에서 OCE11102이 PCI-E 8X로 동작하는지 확인해보세요.
Windows 10 이라면 장치관리자에서 네트워크 어뎁터 속성에 보시면, 현재 PCI-E 동작 속도를 알 수 있습니다.
PCI-E 1x로 동작하면 PCI-E 2.0 슬롯에서 3Gbps 정도 나옵니다.
LnkCap: Port #0, Speed 5GT/s, Width x8, ASPM L0s L1, Exit Latency L0s <2us, L1 <16us
LnkSta: Speed 5GT/s, Width x1, TrErr- Train- SlotClk+ DLActive- BWMgmt- ABWMgmt-
x8가능인데 실제론 x1 로 연결되었다고 이해하면 맞을까요?
윈10 한번 올려보겠습니다
Capabilities: [c0] Express (v2) Endpoint, MSI 00
DevCap: MaxPayload 512 bytes, PhantFunc 0, Latency L0s <1us, L1 <16us
ExtTag- AttnBtn- AttnInd- PwrInd- RBE+ FLReset+
DevCtl: Report errors: Correctable+ Non-Fatal+ Fatal+ Unsupported+
RlxdOrd- ExtTag- PhantFunc- AuxPwr- NoSnoop- FLReset-
MaxPayload 128 bytes, MaxReadReq 512 bytes
DevSta: CorrErr+ UncorrErr- FatalErr- UnsuppReq+ AuxPwr+ TransPend-
LnkCap: Port #0, Speed 5GT/s, Width x8, ASPM L0s L1, Exit Latency L0s <2us, L1 <16us
ClockPM- Surprise- LLActRep- BwNot-
LnkCtl: ASPM L1 Enabled; RCB 64 bytes Disabled- CommClk+
ExtSynch- ClockPM- AutWidDis- BWInt- AutBWInt-
LnkSta: Speed 5GT/s, Width x1, TrErr- Train- SlotClk+ DLActive- BWMgmt- ABWMgmt-
DevCap2: Completion Timeout: Not Supported, TimeoutDis-, LTR-, OBFF Not Supported
DevCtl2: Completion Timeout: 50us to 50ms, TimeoutDis-, LTR-, OBFF Disabled
LnkSta2: Current De-emphasis Level: -3.5dB, EqualizationComplete-, EqualizationPhase1-
EqualizationPhase2-, EqualizationPhase3-, LinkEqualizationRequest-
Capabilities: [b8] Vital Product Data
Product Name: Emulex 10GbE Virtual Fabric Adapter II for IBM System x, NIC PF
Read-only fields:
[PN] Part number: 49Y7951
[SN] Serial number: 11S49Y7951Y650HY42V0EJ
[V0] Vendor specific: FC40828501
[VL] Vendor specific: FRU 49Y7952
[V1] Vendor specific: IBM 49Y7951 Emulex 10GbE Virtual Fabric Adapter II for IBM System x
[V2] Vendor specific: 49Y7951
[V4] Vendor specific: 1
[V5] Vendor specific: OCe11102-N-X
[RV] Reserved: checksum good, 21 byte(s) reserved
최대 링크 너비 8
현재 링크 너비 1
현재 링크 속도 2
부팅시 ctrl+p 로 oce11102 세팅 들어가봐도 속도 제한 할 만한 내용은 안보이던데 이상하네요...ㅜㅜ
외관은 멀쩡한데...이상하게 PCI-E 1x 로 잡히더군요.
아마도 PCI-E 관련 배속 인식관련 어딘가 문제가 발생한 것 같아요.
저도 커넥터나 주변 소자들은 이상이 없어 보이는데 동일 증상으로 봐야겠네요
마음 한구석에 남아있던 찜찜함은 이제 없어졌네요 ㅎㅎ 감사합니다
해외 자료를 찾아보다보면 3~3.3Gbps 밖에 속도가 안나온다는 이야기가 드물게 나오기는 하는데
대부분 보드랑 카드간 PCI-E 링크속도와 관련된 문제로 추측되더군요.
PCIe 레인 배속 자체를 설정하게 되어있더군요. 디폴트가 32 배속인데,
64, 128, 256까지 설정하게 되어있는데 이 속도가 구글링해보면, 128/256으로 올려서,
속도변화를 측정하라고 하더군요..
============
델 2011소켓 웍스 하나도 바이오스에 256배속으로 첨 부터 설정되어있고,
여튼 pci 레인 속도가 달라지면 당연히 속도가 변하는데.. 시스템마다 달라서 직접
트윅해보는 수 밖에 없다고 하더군요...일반 데탑은 대개 바이오스에 이설정자체가 없는 경우가
많은 것 같애요..
멜라녹스 카드 하나 구해서 교체했더니 이상없이 10G 속도 나옵니다
결국 에뮬렉스 카드가 뭔가 이상이 있었던것이었네요
근데 하드를 주력으로 쓰다보니 속도가 조금밖에 오르지 않아 큰 체감은 없었습니다 ㅎㅎ
더불어 왜 x1 으로 밖에 안되는지 카드를 자세히 보니 pcie 골드핑거쪽의 캐패시터 하나가 없네요??
다른 카드를 봐도 꼭 있어야 할 것 같은데 없습니다.. 동박이 떨어진것도 아니고 누군가 임의로 제거한건지..
주변것들 값 찍어보니 100nF 여서 100nF 하나 구해서 납땜했더니... iperf 상에서 9.5G 정도로 나옵니다!
아... 진작 좀 자세히 볼걸.. ㅎ