NAS 성능 SMB 이슈 관련해서????

정영철   
   조회 2461   추천 0    

쪽팔리면 질문하지 맙시다. 소중한 답변 댓글을 삭제하는건 부끄러운 일 입니다 

안녕하세요

스토리지 엔지니어인데 NAS 성능이 안 나와서 궁금한게 있어서 문의 드려요

간단히 적어보네요

1. 장비 

DELL PowerScale ALL NVME


2. 네트워크 연결

NAS to L2 : 100G 연결

L2 to MAC 스튜디오 : 10G

L2 to Windows PC(10버전) : 10G


3. 성능 확인

대용량 파일(10~50GB)을 NAS에 있는 파일을 MAC으로 받으면 거의 800MB/s 1GB/s 속도 나옵니다(Windows PC동일)

대용량 파일(10~50GB)을 MAC 또는 Windwos PC에서 올리면 처음에는 1GB/s 잠깐 나왔다가 3-400MB/s 떨어집니다

크리스탈 디스크로 벤치 해보니 읽기 800MB/s이상 쓰기 350MB/s 선 나오더라구

* 어떤 문제인지 확인인데 아직 찾지 못 하였습니다

* 2대를 동시 연결해도 2대다 업로드는  3-400MB/s.....NAS 에서 총 700MB/s이상을 받아주고요 설계상 훨씬 많이 받아주는 스펙입니다


4. 문의 내용

- SMB 2.0과 SMB 3.0에 로직상 SMB 2.0으로 연결이 되면 업로드시 속도 저하 부분이 있을 수 있을까요?(x% 단위가 아닌 xx%단위)

* SMB 프로토콜 부분을 이해 못 하는 부분도 있어서 

- 네트워크에 MTU값을 기존 1500에서 9000(점보 프레임)으로 변경시 업로드에서 유의미한 성능향상이 있을 수 있을까요?

* 업로드 700MB/s이상에 성능을 고객이 요구하는데.......의미가 있을려나

추가로  PC 또는 MAC 설정을 건들께 있을까요?


감사합니다


짧은글 일수록 신중하게.
박문형 2024-09
스위치 모델명이 어떻게 되나요??
     
DELL S5296F 입니다
술이 2024-09
설마 어레이를 패리티기능 레이드5/6 이렇게 잡은건 아니겠죠? 쓰기속도 반토막 이상 떨어지는건 그거말곤 없을거 같은데...
     
노드가 여러개인데요 한 노드에만 테스트시 여러개(2개만 테스트) 해도 속동는 1개할때랑 비슷하게 나오는데
반토막은 조금 이상해서요........
레이드는 아니고 Erasure Code로 되는데요 레이드랑 비슷하긴..한데.....이거때문인가.....모르겠네요
          
술이 2024-09
노드끼리 그룹으로 묶어진 NAS인가요? 요즘 멀티노드 스토리지처럼?
그럼 그룹노드끼리 데이터 동기화때문에 쓰기속도가 떨어지는건 맞을거 같기도...(노드끼리는 100G 정도로 붙여줘야 쓰기속도 안느리긴 할겁니다)

보통 NAS는 쓰기속도에 목숨걸지 않는데(블럭스토리지면 모를까)
               
백엔드는 100G조
               
김현린 2024-09
파워스케일=아이실론 입니다.
EMC의 하이엔드 NAS죠.. 구성은 걱정할게 아닙니다..
박문형 2024-09
스튜디오니까 영상편집을 기본으로 할 것으로 보이고  모든것이 10G 이상이니까 아마도 4K 영상 편집용일 것입니다..

스토리지 성능도 중요하지만 용량도 중요하기에 RAID 5/6는 거의 기본일겁니다..

그리고 정확한 스토리지 모델이 없지만 그냥 플래쉬 스토리지에 100G 하나 연결되어 있다라고 생각할 수 밖에 없네요..
     
100G하나로 테스트 한거고 100G는 12라인입니다.
SMB 특성에서 개선할게 있나 문의한 내용입니다.
용량이 페타 단위라.....
박문형 2024-09
https://www.storagereview.com/review/dell-powerscale-benefitting-from-qlc-ssd-economics-and-performance

DELL  PowerScale ALL NVME 장비에 어떤 모델의 NVME가 들어가 있는지 확인해보았습니다..
INTEL (솔리다임) P5316 NVME를 사용하는 것으로 보여집니다..

https://www.storagereview.com/review/intel-p5316-ssd-review-30-72tb

INTEL P5316 NVME 를 검색해보았습니다..



개인적인 의견입니다..

리뷰에서는 읽기쪽에 좀더 최적화한 NVME 로 나오고 있으며 스팩에서 읽기는 7000MB/s 쓰기는 3200~3600MB/S 로 나오고 있기에

NVME의 한계로 인해 읽기는 쓰기의 반토막이 날 수 밖에 없을 것 같습니다..
제온프로 2024-09
QLC 를 쓰셨나 보네요..

아무래도..
maronet 2024-09
내부 문서 검색해보시고, 고객 워크로드 특성 정리해서 티켓 오픈하시는게 가장 빠를겁니다.
     
송주환 2024-09
+1
경험상 저런 경우는 네트워크 설정 / SMB 구성 문제인 경우가 대부분이었습니다.
흥마 2024-09
TCP Dump 해서 확인 해 보시는걸 권장 합니다.
속도가 유지 안 되고 0 찍는 현상이 있어서
패킷 보니깐 Windows 사이즈가 떨어지는 현상을 문의 했더니, 알려진 버그라고 별도로 패치 한적 있었습니다.

새 장비로 최신 버전으로 납품 되었는데도요.

점보는 연결을 L2일 때만 하세요. 양쪽과 스위치 모두 9000설정되어야 합니다
중간에 스위치가 1500이면, 패킷 드롭 또는 디프레그로 스위치 과부하 걸립니다.
epowergate 2024-09
- SMB 2.0과 SMB 3.0에 로직상 SMB 2.0으로 연결이 되면 업로드시 속도 저하 부분이 있을 수 있을까요?(x% 단위가 아닌 xx%단위)
무지 많습니다.

- 네트워크에 MTU값을 기존 1500에서 9000(점보 프레임)으로 변경시 업로드에서 유의미한 성능향상이 있을 수 있을까요?
거의 없습니다.

-Erasure Code
성능과 거의 관련 없습니다.

문제는 MAC의 SMB가 후저서 그렇습니다.
아래와 같이 해보세요
1. PowerScale SMB 옵션에 OPLOCK1,2,3 가 있으면 모두 enable
2, PowerScale SMB 옵션에 sendfile 사용 옵션이 있으면 enable
3. AFP를 사용할 수 있으면 그거 사용.  즉, Win은 SMB3, MAC은 AFP. 주의할 건 동일 1개의 DIR에 2개의 SHARE에서 접근이 가능토록 설정해야 함
maronet님이 언급하시대로 NAS 장비에 한정해서 읽기/쓰기 속도가 최대 얼마 나오는 지 도입한 장비 업체를 통해서 확인 받으시는 게 어떨까 합니다.
Erasure code 라는 게 쓰기 작업시에 패리티 연산과 블록 기록에 자원이 많이 소모되서 속도가 안나오는지 검증 하는 게 관건 같습니다.
위 박문형님이 알려주신 P5316 NVME 의 스펙대로라면 단일 NVME 하나로도 읽기 7GB, 쓰기 3.2 ~ 3.6GB 라서, 장비 2대가 동시에 쓰기를 해도
속도가 보장이 되어야 할 것 같습니다. 따로 이런 부분이 확인이 가능하면 테스트 할 여지도 있을 것 같고요
     
maronet 2024-09
벤더사에 성능지표 측정한 자료, 용도별 Best Practice guide(위에 epowergate님 말씀하신 것 같은 내용이 여기 있겠죠), design guide 등등 이미 다 준비되어 있을 겁니다.
민호양 2024-09
Mac/Windows 둘 다 업로드시에 오래걸리는 것 같은데, 처음에 1GBps 나오는건 스토리지 자체의 속도보다 캐시가 먼저 채워져서 그 속도가 나오고, 그 이후에 찍히는 3-400Mbps의 속도가 장비의 실제 한계일겁니다. 장비에 구성된 SSD가 쓰기에 3600MBps가 나온다는데, 그걸 묶은 NFS가 3-400MBps (2400~3200 Mbps)가 나오는건, 확실히 SMB나 Network 설정 문제가 있어보입니다. 모든 통신 선로에서 jumbo frame을 켜보시는게 좋겠습니다.
이선호 2024-09
Erasure Code로 이슈를 가져본적이 별로 없어서 저도 궁금하네요.
일단 EC 자체가 레이턴시 영향을 많이 받습니다. Dell Powerscale 에 10Gbe면 CPU 성능 문제는 아닐테고 노드간 구성이 어떻게 되어있는지부터 살펴봐야 하지 않을까 싶습니다.
점보프레임은 특별한 경우가 아니라면 손대지 않는걸 권장합니다.


QnA
제목Page 82/5724
2014-05   5237584   정은준1
2015-12   1763284   백메가
2024-09   1325   신은왜
2024-09   980   백룡
2024-09   1285   httpd
2024-09   1246   레나
2024-09   1859   VSPress
2024-09   192   니키챤
2024-09   1217   사식이
2024-09   1251   Psychophysi…
2024-09   1102   pumkin
2024-09   1245   yummy
2024-09   1171   농약맛달콤
2024-09   1376   dateno1
2024-09   1486   항공모함
2024-09   1209   chotws
2024-09   1221   승리의샌디…
2024-09   1745   VSPress
2024-09   2462   정영철
2024-09   1251   클락
2024-09   1136   파피푸페
2024-09   1158   어드민플레이