Mangstor NX6325 NVMf 어레이 검토

Mangstor NX6325 NVMe Over Fabrics(NVMf) 공유 스토리지 어레이는 HP DL21.6 380U 서버에서 최대 2TB의 플래시 스토리지를 제공합니다. 처럼 올해 초 검토한 NX6320NX6325는 Mangstor의 애드인 카드(AIC) NVMe 드라이브를 통합하여 네트워크를 통해 공유합니다. 이를 통해 대기 시간에 민감한 애플리케이션은 모든 서버 내부에 AIC가 없어도 NVMe 스토리지의 모든 뛰어난 이점을 활용할 수 있습니다. Mellanox SN2700 100GbE 스위치 및 ConnectX4(이더넷 또는 InfiniBand)와 함께 사용할 경우 NX6325는 단일 어레이에서 12GB/s의 보고된 읽기 성능과 9GB/s의 쓰기를 제공하는 인상적인 기능을 제공합니다.

저장소 조정은 Mangstor의 TITAN 소프트웨어입니다. 우리는 NX6320에서 TITAN의 초기 버전을 보았습니다. Mangstor는 소프트웨어를 만들었습니다. 이달 초 일반적으로 사용 가능. 핵심에서 TITAN은 HPE 서버 기능을 효율적으로 사용하면서 NVMe SSD와 원격 직접 메모리 액세스(RDMA) 네트워크 인터페이스 카드(NIC) 간의 긴밀한 통합을 제공합니다. TITAN을 사용하면 IT 관리자가 중앙 집중식 관리를 통해 로컬 또는 원격으로 플래시를 동적으로 프로비저닝할 수 있습니다. 기능에는 스토리지 캐싱 및 클러스터 관리와 같은 기능도 포함되며 TITAN은 IT 관리자가 NVMf 스토리지의 대규모 클러스터를 쉽게 배포하고 관리할 수 있는 REST API 및 GUI 도구를 제공합니다.

Mangstor는 이더넷 또는 InfiniBand용으로 구성된 두 가지 용량 옵션을 제공합니다. 구매자는 10.8개의 2.7TB 드라이브로 구성된 21.6TB 시스템 또는 5.4개의 10.8TB 드라이브로 구성된 XNUMXTB 시스템 중에서 선택할 수 있습니다. 검토 시스템은 XNUMXTB 이더넷 구성입니다.

Mangstor NX6325 사양

플래시 스토리지 어레이
- Ethernet
  - NX6325R-016TF-2P100GQSF, 10.8TB(4TB SSD 2.7개)
  - NX6325R-032TF-2P100GQSF, 21.6TB(4TB SSD 5.4개)
- 인피니밴드
  - NX6325I-016TF-2P100GQSF, 10.8TB(4TB SSD 2.7개)
  - NX6325I-032TF-2P100GQSF, 21.6TB(4 x 5.4TB SSD)
대역폭 Rd/Wr(GB/s): 12.0 / 9.0
처리량 Rd/Wr(4K)(IOPS): 3.0M / 2.25M
출력
- 450W 일반
- 최대 피크 전력 800W
I/O 연결
- 2x100Gb/s QSFP 이더넷
- 2x100Gb/s QSFP 인피니밴드
읽기/쓰기 대기 시간: 110uS / 30uS
기기 속성
- 2U 랙 마운트(HxWxD): 3.44 x 17.54 x 26.75cm(8.73 x 44.55 x 67.94인치)
- 공급 전압: 100~240VAC, 50/60Hz~800W 예비 전원 공급 장치
- 열 손실(BTU/시간): 3207 BTU/시간(100VAC에서), 3071 BTU/시간(200VAC에서), 3112 BTU/시간(240VAC에서)
- 최대 돌입 전류: 30A(지속 시간 10ms)
- 대략적인 무게: 51.5lb(23.6kg)(완전 장착 시)
환경
- 표준 작동 지원: 해발 10° ~ 35°C(50° ~ 95°F), 해발 1.0m당 305°C(1.8피트당 1000°F)씩 최대 3050까지 감소 m(10,000피트)
- 습도: 비작동 5 ~ 95% 상대 습도(Rh), 38.7°C(101.7°F) 최대 습구 온도, 비응축
패브릭 프로토콜 지원: RoCE(RDMA over Converged Ethernet), InfniBand, iWARP
클라이언트 OS 지원: RHEL, SLES, CentOS, Ubuntu, Windows, VMware ESXi 6.0(VMDirectPath)
운영 관리: CLI, RESTful API, OpenStack Cinder
어레이 및 SSD 보증: 하드웨어 5년; 기본 소프트웨어 90일
소프트웨어 보증: 1년, 3년, 5년 골드 또는 플래티넘 수준 서비스 및 지원 옵션이 적용됩니다.

빌드 및 디자인

이전에 검토한 NX6320 어레이에서 Mangstor는 Dell R730 기반 플랫폼을 활용했습니다. 이번에는 NX6325와 함께 HPE ProLiant DL380 Gen9를 사용하고 있습니다. 표면적으로는 이러한 움직임이 "비슷한" 것처럼 보이지만 100Gb 이더넷 또는 Infiniband를 배포하여 스토리지 잠재력을 최대로 끌어올리려는 고객에게는 이러한 변화가 중요합니다. Dell R730은 7개의 PCIe 3.0 슬롯을 제공합니다. 16개의 전체 높이 x8 및 380개의 절반 높이 x9. HPE DL6 Gen3.0에는 PCIe 16 확장 슬롯이 XNUMX개뿐이지만 적절한 PCIe 라이저 키트를 사용하면 사용자가 전체 높이 xXNUMX 슬롯 XNUMX개로 구성을 만들 수 있습니다.

Mangstor가 제공하는 카드는 전체 높이 PCIe SSD이고 100GbE Mellanox ConnectX-4 NIC는 x16 슬롯이기 때문에 그 차이는 중요합니다. Dell 구성에서 사용자는 100GbE 카드에 맞도록 PCIe SSD 4개를 떨어뜨려야 하지만 HPE 구성에서는 사용자가 시스템에 100개의 PCIe SSD와 40개의 56GbE NIC를 동시에 장착할 수 있습니다. 이것은 어떤 서버가 다른 서버보다 낫다는 논쟁이 아니라 이 독특한 카드 조합에서 어떤 서버가 더 잘 작동하는지에 대한 분석입니다. Mangstor는 6320Gb 이더넷 또는 6325Gb Infiniband를 사용하려는 고객을 위해 NX100 및 NX6325 제품 모두 동일한 기능과 성능을 제공한다고 지적합니다. 이 검토에서 XNUMXGb 이더넷을 테스트하고 있으므로 NXXNUMX가 올바른 선택입니다.

시스벤치 성능

각각의 시스벤치 VM은 92개의 vDisk로 구성됩니다. 하나는 부팅용(~447GB), 하나는 사전 구축된 데이터베이스(~307GB), 세 번째는 테스트 중인 데이터베이스용(90GB)입니다. LUN은 데이터베이스(크기 11GB)에 적합하도록 사용 가능한 스토리지(253TB)의 16%를 고르게 분할합니다. 시스템 리소스 관점에서 각 VM을 vCPU 60개, DRAM XNUMXGB로 구성하고 LSI Logic SAS SCSI 컨트롤러를 활용했습니다. 로드 생성 시스템은 델 R730 서버; 우리는 이 검토에서 4개에서 XNUMX개를 사용하여 XNUMXVM 그룹당 서버를 확장합니다.

Dell PowerEdge R730 8노드 클러스터 사양

Dell PowerEdge R730 서버(x8)
CPU: Intel Xeon E5-2690 v3 2.6GHz(12C/24T) XNUMX개
메모리: 128 x 16GB DDR4 RDIMM
멜라녹스 ConnectX-4 LX
VM웨어 ESXi 6.0

Mangstor NX6320에 대한 이전 리뷰에서는 Mellanox ConnectX-3 카드와 OFED ESXi 6.0 드라이버를 활용했습니다. 여기서 하나의 카드가 각 VM에 할당되었습니다(가지고 있는 NIC 수로 규모를 제한함). Mellanox ConnectX-6325 LX 카드와 최신 SRIOV 드라이버가 포함된 NX4의 현재 반복을 통해 동시에 최대 4개의 VM과 여러 가상 어댑터를 공유할 수 있었습니다. 서버당 하나의 카드가 할당된 상태에서 이 구성을 사용하여 총 32개의 VM을 테스트할 수 있도록 확장할 수 있었습니다.

32VM의 전체 로드에서 각 서버의 CPU 사용률은 약 86%로 떨어졌습니다.

Sysbench 테스트 구성(VM당)

센트OS 6.3 64비트
스토리지 공간: 1TB, 800GB 사용
페르코나 XtraDB 5.5.30-rel30.1
- 데이터베이스 테이블: 100
- 데이터베이스 크기: 10,000,000
- 데이터베이스 스레드: 32
- RAM 버퍼: 24GB
시험 시간: 3시간
- 2시간 동안 32개 스레드 사전 조정
- 1시간 32 스레드

Sysbench OLTP 테스트에서는 4VM의 작은 로드에서 32VM의 전체 포화 지점까지 어레이를 가져왔습니다. Mangstor NX6325는 인상적인 기록을 세웠습니다. 우선 로컬로 연결된 플래시가 아닌 Sysbench에서 가장 빠른 성능을 제공했으며 지금까지 테스트한 다른 제품과 비교하여 기준을 6325배 이상 높였습니다. NX38,673는 17,316 TPS로 XNUMX위를 차지한 반면 최신 플래시 공유 스토리지 솔루션의 이전 기록 보유자는 "단지" XNUMX TPS로 나타났습니다.

대기 시간을 보면 NX6325가 부하 상태에서 매우 잘 대처하여 전체 트랜잭션 대기 시간을 14.3VM에서 4ms에서 26.6VM에서 32ms 범위로 유지한다는 것을 알 수 있습니다. 따라서 부하가 8배 증가하는 동안 대기 시간은 두 배도 되지 않았습니다.

99번째 백분위수 수치로 비주류 대기 시간을 보면 Mangstor NX6325가 부하 상태에서 상당히 잘 처리되었습니다. 전체 로드가 증가함에 따라 값이 천천히 증가하는 것을 보았지만 극적으로 증가한 것은 없었습니다.

결론

Mangstor NX6325 NVMe Over Fabrics(NVMf) 공유 스토리지 어레이는 매우 빠른 NVMe 스토리지를 애플리케이션 서버에서 꺼내 전체 서버 클러스터에서 활용할 수 있는 상자에 넣을 수 있는 최초의 상용 시스템 중 하나입니다. . 이 경우 검토 중인 NX6325는 HPE ProLiant DL10.8 Gen380에서 Mellanox SN9 2700GbE 스위치 및 ConnectX100 LX 어댑터 카드로 구성된 패브릭을 통해 최대 4TB의 NVMe 스토리지를 제공합니다. 최종 결과는 실험실에 도달한 것 중 가장 빠른 공유 스토리지라는 점에서 절대적으로 뜨거운 패키지입니다. 공정하게 말하면 이것은 우리가 본 다른 빠른 것(보다 전통적인 올플래시 SAN과 같은)과 직접적으로 비교할 수 없으며 그 때문에 몇 가지 사항을 명확히 해야 합니다.

NVMf는 실행 측면에서 아직 매우 어린 개념입니다. Mangstor는 그 길에서 매우 멀리 떨어져 있으며 대기 시간에 매우 민감한 응용 프로그램의 경우 결과가 놀랍습니다. 모든 곳에서 SAN 기술을 대체하기 위해 몇 가지가 아직 성숙해야 하지만 핵심 워크로드의 경우 환상적인 옵션입니다. 다른 NVMf 솔루션과 비교할 때 Mangstor는 패브릭에 기존 이더넷 또는 IB를 활용하므로 맞춤형 하드웨어를 사용하는 일부 솔루션보다 호환성이 뛰어납니다. 또한 이 어레이에 스토리지가 표시되는 방식이 PCIe SSD 오류로부터 보호를 제공하지 않는다는 점에 유의해야 합니다. 어레이는 최고의 성능과 용량을 위해 RAID0으로 구성됩니다. 이와 같은 시스템에 대처할 수 있는 일부 애플리케이션이 있지만 기존 워크로드의 경우 이 어레이가 "모두에게 적합한" 것이 아니라는 점을 강조해야 합니다.

Sysbench OLTP 테스트의 성능을 살펴보면 놀라운 수치를 볼 수 있습니다. 4VM에서 총 TPS는 대부분의 어레이가 제공하는 총 TPS 또는 로컬로 연결된 NVMe 플래시가 제공할 수 있는 것보다 높았습니다. VM 수를 늘려 워크로드를 늘리면 가장 가까운 플래시 공유 스토리지 솔루션을 6325배 이상 능가할 때까지 전체 성능이 계속해서 증가하는 것을 볼 수 있었습니다. 현재 우리 환경의 주요 단점은 VMware 공유 데이터 저장소로 사용할 수 없도록 하는 드라이버 지원입니다. 이것은 VM 마이그레이션(가상 네트워크 장치에 연결됨) 또는 현재 Linux를 중심으로 하는 게스트 OS 지원과 같은 몇 가지 문제를 제시합니다. 그러나 이러한 제한 사항을 해결할 수 있는 사용자를 위해 Mangstor NXXNUMX는 경쟁 솔루션과 비교할 수 없는 수준의 성능을 제공합니다.

장점