홈페이지 Enterprise BlueField, E1.L 및 SCM 온보드와 함께 출시된 VAST Data Ceres 데이터 노드

BlueField, E1.L 및 SCM 온보드와 함께 출시된 VAST Data Ceres 데이터 노드

by 해롤드 프리츠
랙의 방대한 데이터 세레스

VAST 데이터 Ceres라는 차세대 스토리지 플랫폼에 대한 지원을 발표했습니다. VAST의 Universal Storage 데이터 플랫폼이 지원하는 Ceres는 다음과 같은 최신 하드웨어 기술을 활용하여 구축되었습니다. 엔비디아 블루필드 DPUs(데이터 처리 장치). 스토리지 측면에서 Ceres는 비용 최적화되고 고집적인 Solidigm EI.L 눈금자 플래시 드라이브와 스토리지 클래스 메모리(SCM) SSD를 활용합니다. 하드웨어 조합은 성능을 개선하고 서비스 가능성을 단순화하며 데이터 센터 비용을 줄이는 완전히 새로운 VAST 데이터 노드(DNode)를 망으로 합니다.

VAST 데이터 Ceres라는 차세대 스토리지 플랫폼에 대한 지원을 발표했습니다. VAST의 Universal Storage 데이터 플랫폼이 지원하는 Ceres는 다음과 같은 최신 하드웨어 기술을 활용하여 구축되었습니다. 엔비디아 블루필드 DPUs(데이터 처리 장치). 스토리지 측면에서 Ceres는 비용 최적화되고 고집적인 Solidigm EI.L 눈금자 플래시 드라이브와 스토리지 클래스 메모리(SCM) SSD를 활용합니다. 하드웨어 조합은 성능을 개선하고 서비스 가능성을 단순화하며 데이터 센터 비용을 줄이는 완전히 새로운 VAST 데이터 노드(DNode)를 망으로 합니다.

랙의 방대한 데이터 세레스VAST 데이터 세레스 1U D노드

CMO이자 공동 설립자인 Jeff Denworth에 따르면 VAST의 핵심 임무는 인프라를 단순화하여 배포 및 관리가 더 쉬우면서도 비용 효율성을 높이는 것입니다. VAST는 데이터 관리 시스템을 만들고 간단하고 비용 효율적으로 확장할 수 있는 시스템을 구축하기 시작했습니다. 관건은 성능 요구 사항, 수명, 저비용을 충족하는 플래시 기반 시스템을 구축하는 것이었습니다.

우리는 이 모든 것이 어떻게 결합되는지 더 잘 이해하기 위해 VAST 데이터로 며칠을 보냈습니다. 결국 VAST는 소프트웨어 회사입니다. 과거에는 호환 가능한 하드웨어가 고객이나 시스템 통합업체에 의해 호환성 목록에서 선택되었음을 의미했습니다. VAST는 조금 다르게 작동합니다. VAST의 하드웨어 파트너인 AVNET은 하드웨어를 결합하지만 최종 솔루션은 기존의 소프트웨어 정의 스토리지보다 어플라이언스처럼 느껴집니다.

궁극적으로 VAST의 Universal Storage 플랫폼을 실행하는 하드웨어의 발전이 주요 차별화 요소입니다. NVIDIA BlueField와 같은 새로운 데이터 전송 기술을 활용하는 기능은 하드웨어를 매우 독특하게 만듭니다. 소수의 신생 기업을 제외하고는 플래시 및 하이브리드 스토리지 어레이가 도입된 이후로 데이터 스토리지 아키텍처에 근본적인 변화가 없었습니다. 그 혁신적 불쾌감은 오늘 VAST Ceres DNodes의 출시로 확실히 끝납니다.

광대한 대담

새로운 아키텍처는 확장성 문제를 해결하고 많은 수의 드라이브에 액세스할 수 있는 상태 비저장 컨테이너의 필요성과 I/O 작업을 서로 조정해야 할 필요성을 없애기 위해 만들어졌습니다. 그래서 VAST는 DASE를 설계했고 분해된 공유된 모든 것, VAST NVMe 인클로저에 내장된 저비용 플래시에 있는 데이터 구조입니다.

VAST 시스템은 코어 수가 다르거나 CPU 아키텍처가 다른 프런트 엔드 서버와 다양한 크기의 SSD를 보유하는 스토리지 인클로저 전체에서 단일 클러스터 및 단일 스토리지 풀을 형성합니다. 이를 통해 VAST 사용자는 여러 세대의 VAST 하드웨어로 클러스터를 원활하게 실행할 수 있습니다.

VAST의 DASE 아키텍처에서 모든 SSD는 NVMe-oF를 통해 모든 프런트 엔드 프로토콜 서버에서 공유되고 직접 처리됩니다. VAST의 데이터 배치 방법은 노드/인클로저 수준이 아닌 장치에서 작동합니다. 시스템은 시스템에 있는 모든 SSD의 성능, 로드, 용량 및 내구성을 기반으로 각 삭제 코딩된 스트라이프를 쓸 SSD를 선택합니다. 이 로드 밸런싱은 다양한 용량과 성능 수준의 SSD를 보유한 인클로저 간에 균형을 이룹니다.

시스템은 DNS 요청을 해결하고 CPU 사용률이 가장 낮은 프로토콜 서버에 시스템 하우스키핑 샤드를 할당하여 서로 다른 성능 수준의 프런트 엔드 프로토콜 서버 간에 로드 균형을 유사하게 조정합니다.

이 모든 것을 통해 VAST 클러스터는 이기종 프로토콜 서버, 인클로저 및 여러 세대의 SSD에 걸쳐 단일 로드 밸런싱된 네임스페이스를 생성할 수 있습니다. VAST 사용자는 단순히 새 서버 및/또는 인클로저를 클러스터에 연결하고 수명이 다하면 어플라이언스를 제거합니다.

VAST 서버는 표준 x86 서버에서 VAST 클러스터의 모든 논리를 실행하는 상태 비저장 컨테이너입니다. NVMe over Fabrics를 사용하여 각 서버는 모든 NVMe 플래시 및 스토리지 클래스 메모리 스토리지 장치에 대한 지연 시간이 짧은 DAS와 같은 액세스를 즐깁니다.
컨테이너를 사용하면 VAST를 소프트웨어 정의 마이크로서비스로 간단하게 배포하고 확장할 수 있으며, 컨테이너 오류가 시스템 운영에 영향을 미치지 않는 훨씬 더 탄력적인 아키텍처의 기반을 마련하여 세계 최초의 웹 규모 "모든 것을 분해하고 공유"할 수 있습니다. 건축학.

VAST NVMe 인클로저는 고가용성, 고밀도 플래시 스토리지 JBOF입니다. 시스템이 분리되도록 스토리지 처리 책임이 VAST 인클로저에서 분리되었습니다. 시스템에서 실행되는 논리가 없기 때문에 조직은 컴퓨팅과 독립적으로 스토리지 용량의 크기를 조정하여 환경을 적절하게 조정할 수 있습니다. 시스템은 완전한 내결함성이 있기 때문에 하나의 인클로저에서 클러스터를 구축하고 1,000개 이상의 인클로저로 확장할 수 있습니다.

또한 모든 시스템이 서로 통신해야 할 필요성을 해결하는 것뿐만 아니라 선형적으로 확장하는 것도 중요했습니다. 새로운 시스템은 글로벌 코드라는 알고리즘을 사용하여 플래시 드라이브의 효율성을 극대화하도록 설계되었습니다. VAST는 메모리와 플래시의 조합을 사용하여 시스템을 통과할 때 셰이프 쓰기를 사용하여 플래시 마모를 제거합니다. VAST는 Universal Storage 소프트웨어를 사용하여 두 배의 플래시 수명(SSD 공급업체 보증 초과)을 실현했습니다.

VAST는 궁극적인 성능이 아니라 인프라 비용과 통합의 산물인 단순성 이점에 중점을 두었습니다. 모든 데이터 센터, 모든 애플리케이션, 모든 사용자를 위한 VAST 민주화 플래시. 성능이 궁극적인 목표가 아니므로 VAST는 페타바이트에서 엑사바이트에 이르는 탄력적이고 경제적인 플래시 용량의 총 플래시 성능이 최신 컴퓨팅 안건을 가능하게 할 것임을 깨달았습니다. IOPS와 대역폭은 이제 플래시 용량의 부산물이며 모든 것이 'VAST Enough'가 됩니다.

VAST는 고급 스토리지 공급업체로 발전하여 계속해서 플래시에 구애받지 않습니다. 원래 VAST 하드웨어는 2PB 플래시를 수용할 수 있는 1.3U 랙마운트였지만 최신 모델은 1U 랙마운트 장치입니다. 그리고 그것은 Ceres와 NVIDIA와의 협력으로 이어집니다.

NVMe-oF 및 범용 스토리지

VAST 솔루션의 주요 측면은 고급 소프트웨어 엔지니어링입니다. 빅 데이터, 머신 러닝, 딥 러닝과 같은 데이터 기반 애플리케이션이 효과적이려면 더 많은 데이터를 공급해야 합니다. 플래시에서 아카이브로 데이터를 계층화하면 애플리케이션이 학습할 수 없습니다. 하드 드라이브는 항상 비용 효율적인 데이터 저장 매체로 여겨져 왔지만 비용이 듭니다. 하드 드라이브는 밀도가 높아져도 일정한 속도로 작동하므로 성능이 저하됩니다.

플래시라고도 하는 실리콘 스토리지는 HDD 미디어에 내재된 성능 저하를 제거하도록 설계되었습니다. 그러나 플래시 기술의 혁신은 집적도와 성능에 대한 기업의 요구를 따라잡지 못하여 고객이 계속해서 타협할 수밖에 없습니다. 역사적으로 엔터프라이즈 플래시 시스템은 HDD 기반 스토리지보다 비용이 훨씬 많이 들기 때문에 플래시는 가장 가치 있는 데이터에만 사용됩니다.

VAST는 새로운 스토리지 알고리즘과 새로운 기술을 결합하여 모든 데이터에 대한 플래시 스토리지 인프라를 대중화함으로써 문제를 해결하기로 결정하고 스토리지 설계 및 배포 방법에 대한 근본적인 가정에 도전했습니다. 솔루션은 스토리지급 메모리 속도로 쓰고, NVMe 속도로 읽고, 수백만 IOPS 및 TB/s로 확장하는 것입니다. NVMe-over-Fabrics(NVMe-oF)를 사용하면 상용 데이터 센터 네트워크가 NVMe DAS의 성능과 공유 스토리지 인프라의 효율성을 결합하는 확장 가능한 스토리지 패브릭으로 변환할 수 있습니다.

Solidigm E1.L SSD

비용 대비 성능 요구 사항을 충족하기 위해 QLC 플래시는 VAST 개념의 경제적 목표를 실현하는 동시에 세계에서 가장 까다로운 애플리케이션에 필요한 NVMe 플래시 성능을 제공합니다. 쿼드 레벨 셀(QLC) SSD는 33세대이자 최신 플래시 메모리 밀도이므로 제조 비용이 가장 적습니다. QLC는 TLC(트리플 레벨 셀) SSD보다 동일한 공간에 XNUMX% 더 많은 데이터를 저장합니다.

QLC는 플래시의 GB당 비용을 전례 없이 낮은 수준으로 낮추지만 각 셀에서 더 많은 비트를 압축하려면 비용이 발생합니다. 각 세대의 플래시 칩은 셀에 더 많은 비트를 끼워넣음으로써 비용을 절감하고 더 적은 쓰기/지우기 주기 후에 마모되어 내구성이 낮아졌습니다. 플래시 세대 간의 내구성 차이는 엄청납니다. 100,000세대 NAND(SLC)는 100번 덮어쓸 수 있으며 QLC 내구성은 XNUMX배 낮습니다. 이는 상당한 절충안이며 QLC SSD를 사용하는 스토리지 공급업체가 창의적인 방식으로 이를 수행해야 하는 이유입니다.

VAST의 범용 저장소 시스템은 저비용 QLC SSD의 내부 형상과 일치하는 새로운 데이터 구조와 쓰기를 흡수하는 대용량 스토리지 클래스 메모리 쓰기 버퍼를 사용하여 플래시 마모를 최소화하도록 설계되어 플래시 마모를 최소화하기 위한 시간과 공간을 제공합니다. 이 조합을 통해 VAST Data는 QLC 플래시 시스템을 10년 동안 보증할 수 있어 시스템 소유 경제성에 긍정적인 영향을 미칩니다.

스토리지 클래스 메모리

플래시와 DRAM 사이에 위치한 새로운 비휘발성 저장 매체를 활용하는 Storage Class Memory 메모리는 기업 환경에서 QLC를 현장화할 수 있게 해주는 기술입니다.

스토리지 클래스 메모리는 SSD에 사용되는 NAND 플래시 메모리보다 대기 시간이 짧고 내구성이 뛰어난 영구 메모리 기술로, 외부 전원 없이 데이터를 지속적으로 유지하는 플래시의 기능을 유지합니다. Universal Storage 시스템은 스토리지 클래스 메모리를 고성능 쓰기 버퍼로 사용하여 시스템의 데이터 저장소 및 글로벌 메타데이터 저장소를 위한 저비용 QLC 플래시를 배포할 수 있습니다.

광대한 데이터 세레스 scmKIOXIA FL6 SCM SSD

Universal Storage 클러스터에는 수십에서 수백 테라바이트의 스토리지 클래스 메모리 용량이 포함됩니다. VAST DASE 아키텍처의 이점에는 극히 짧은 대기 시간, 100% 지속성 및 DRAM에 비해 저렴한 비용이 포함됩니다. VAST는 현재 Intel 및 KIOXIA의 SCM SSD를 지원하지만 플랫폼은 시장에 출시된 다른 드라이브도 지원할 수 있습니다.

범용 스토리지 GUI

스토리지 관리 영역에서 고유한 것은 스토리지 미디어의 구성, 관리 및 유지 관리를 위한 GUI에 대한 액세스입니다. Universal Storage 시스템은 GUI 인터페이스를 제공하여 스토리지 관리자의 작업을 보다 쉽게 ​​해줍니다. 이러한 특성의 시스템은 종종 CLI 기반인 경향이 있으므로 사용하기 쉬운 인터페이스는 VAST의 중요한 차별화 요소입니다.

이 디스플레이는 각 드라이브의 예상 가용 용량을 보여줍니다. 왼쪽 열에서 관리자는 사용 가능한 기능을 선택할 수 있습니다. 그래픽의 각 "슬라이스"는 드라이브 사용량을 보여주며 해당 슬라이스의 세부 정보는 오른쪽에 제공됩니다. 드라이브 사용 유형은 사용 가능한 용량입니다.

대시보드 디스플레이에는 용량, 물리적 및 논리적 사용량, 전체 성능에 대한 세부 정보가 표시되며 하단에는 읽기/쓰기 대역폭, IOPS 및 전체 대기 시간이 표시됩니다.

데이터 흐름 표시는 매우 유용한 도구입니다. 사용자 원본, 호스트 IP, Vip, CNode 및 대상을 보여줍니다. 일반적으로 이 작업은 그래픽 표시 없이 각 경로에 대한 명령줄을 통해 수행됩니다. 이 화면만으로도 각 사용자의 데이터 경로를 추적하여 문제 해결을 줄일 수 있습니다.

GUI에는 하드웨어의 전면 및 후면 보기를 표시하는 옵션도 있습니다. 선택한 드라이브는 Ceres 전면 뷰에서 화면에 윤곽선으로 표시됩니다. 직관적인 시각적 표시기는 또한 SSD를 교체해야 하는 경우 서비스 용이성을 지원합니다.

같은 화면에서 서버 후면에서 사용 중인 SSD 중 하나를 선택할 수 있습니다.

VAST Data Ceres DPU

새로운 Ceres 스토리지 플랫폼 개념은 NVIDIA BlueField DPU와 눈금자 기반 하이퍼스케일 플래시 드라이브를 개척하여 확장 가능한 데이터 클러스터의 분해된 빌딩 블록 역할을 합니다. VAST의 Universal Storage는 차세대 고성능 NVMe 인클로저를 위해 Ceres를 지원합니다.

방대한 데이터 세레스 dpu엔비디아 DPU

VAST Data의 CMO인 Jeff Denworth는 다음과 같이 설명했습니다.

“XNUMX년 전에 우리는 하이퍼스케일 데이터 인프라에 대한 비전을 업계에 공유했고, 업계 파트너들이 이 비전에 대한 협력과 지원에 놀랐습니다. 폭발적인 데이터 증가로 방대한 데이터 매장량에서 가치를 찾는 데 점점 더 어려움을 겪고 있는 조직을 압도하는 동안 Ceres는 고객이 SuperPOD 규모 이상으로 구축하면서 모든 데이터에 대한 대규모 AI 및 분석의 미래를 실현할 수 있도록 지원합니다.”

VAST와 업계 파트너는 스토리지를 최신 AI 시대로 발전시켜 새로운 속도, 탄력성, 모듈성 및 데이터 센터 효율성을 제공하도록 Ceres를 설계했습니다. 이전에는 세계 최대 규모의 하이퍼스케일 클라우드 공급자의 독점적인 영역이었던 새로운 기능을 기업과 서비스 공급자에게 제공하려는 VAST의 임무는 Ceres와 함께 더욱 발전되었습니다. VAST Universal Storage 소프트웨어는 고객이 최첨단 기술을 채택할 수 있도록 지원하는 새로운 하드웨어 플랫폼을 지원합니다.

이 새로운 플랫폼은 향상된 성능, 향상된 전력 및 공간 효율성을 제공합니다. NVIDIA BlueField DPU 기술을 활용하면 전력 소모가 큰 x86 프로세서 없이도 NVMe 인클로저를 구축할 수 있습니다. NVMe-oF 서비스를 x86 서버에서 BlueField DPU로 전환함으로써 NVIDIA 기술을 통해 인클로저당 1GB/s 이상의 성능을 제공할 수 있는 60U 폼 팩터를 개발할 수 있습니다. VAST의 DASE 아키텍처는 플래시 레이어에서 스토리지 처리를 분리하여 DPU 기반 시스템을 활용하도록 포지셔닝되었습니다.

VAST Data Ceres 하드웨어 레이아웃

언뜻 보기에 VAST Ceres는 매우 매끄러운 베젤이 있는 일반적인 1U 서버처럼 보입니다. 스타일리시한 전면판은 공기 흐름을 위해 설계되었지만 전원이 공급되면 멋진 조명으로 전면 SSD를 밝힙니다. VAST 로고는 또한 멋진 미학을 제공하는 색 구성표로 빛납니다. 외부의 세부 사항에 대한 관심은 내부로 이어지며 일반적이지 않은 스토리지 서버를 드러냅니다.

베젤을 제거하면 이 서버가 실제로 얼마나 독특하고 플래시 밀도가 높은지 알 수 있습니다. 선행은 22개의 E1.L SSD이며, 이 경우에는 22개의 15.36TB 또는 36.72TB Solidigm P5316 SSD입니다. 이 드라이브는 더 큰 2.5인치 U.2 폼 팩터로도 제공되지만 랙 단위당 밀도는 상당히 줄어듭니다. E1.L SSD는 또한 매우 긴 본체 디자인으로 열을 발산할 수 있는 상당한 표면적을 제공하여 냉각에 뚜렷한 이점이 있습니다.

E1.L 폼 팩터는 매우 길기 때문에 "자"라는 용어가 사용됩니다. 길이가 12.5인치가 조금 넘는 크기로 서버의 첫 번째 발에서 얼마나 많은 공간을 차지하는지 알 수 있습니다. 이제 거의 340TB 또는 675TB의 QLC 플래시(선택한 드라이브에 따라 다름)는 흔들릴 것이 없지만 서버의 중간 구성 요소 뒤에 더 많은 플래시가 있습니다. QLC 드라이브의 원시 스토리지 공간에 불과하다는 점은 주목할 가치가 있습니다. VAST는 더 나은 밀도를 위해 데이터 축소 기능을 제공합니다.

전면 로고 블록은 XNUMX개의 추가 SSD 트레이를 숨기고 섀시 전면에 통합 냉각 구성 요소 역할을 합니다. 이 블록에는 XNUMX개의 팬이 있어 이 특정 DNode의 중앙에 위치한 KIOXIA SCM 플래시 전체의 섀시 중앙 아래로 추가 냉각 기능을 제공합니다.

2.5개의 트레이 각각에는 두 개의 2인치 U.6 SSD가 있으며, 이 시스템에서는 KIOXIA의 FL800 1GB SSD입니다. VAST는 이를 주변의 고밀도 QLC 플래시로 필터링하기 전에 수신 데이터를 흡수하는 쓰기 버퍼로 사용합니다. 이 XNUMXU 서버에는 어떤 식으로든 더 많은 스토리지 용량을 위해 활용되지 않는 활용도가 낮은 공간이 없습니다.

VAST Ceres 섀시의 후면은 이중 전원 공급 장치와 이중 컨트롤러로 완전히 이중화되도록 설계되었음을 보여줍니다. 각 컨트롤러에는 각각 듀얼 1600GbE 포트를 제공하는 100개의 NVIDIA BlueField BF800 DPU가 있습니다. 전체적으로 두 컨트롤러에서 사용자는 1Gb/s의 연결성을 갖습니다. 각 컨트롤러에는 관리에 사용되는 XNUMX개의 XNUMXGbE 포트와 직접 BMC 액세스를 위한 마이크로 USB 포트가 있습니다.

각 컨트롤러 슬레드의 내부 디자인은 실제로 사용하지 않는 공간도 남기지 않습니다. 각 NVIDIA BF1600 DPU는 x16 PCIe Gen4 슬롯을 통해 연결되며 추가 전원은 섀시 외부의 카드 바로 외부에 있는 작은 케이지를 통해 라우팅됩니다.

VAST Ceres 내부 디자인은 기존 서버 슬레드와 약간 비슷해 보이지만 기본 서버 x86 또는 유사한 서버 디자인이 없습니다. 각 컨트롤러는 DPU를 내부 및 전면에서 액세스 가능한 스토리지에 연결하는 하나의 대형 PCIe 스위치입니다. NVIDIA BF1600 DPU는 BIOS 및 OS용으로 16GB eMMC 스토리지를 제공하지만 VAST는 슬레드당 2개의 m.XNUMX SSD를 통해 추가 내부 DPU 스토리지로 설계되었습니다.

VAST Ceres의 블록 다이어그램을 보면 이 시스템이 어떻게 설계되었는지 가장 잘 이해할 수 있습니다. 전면에는 두 세트의 SSD와 NVRAM/SCM 드라이브가 있으며 각 컨트롤러 슬레드 내부의 두 DPU 간에 분할됩니다. 각 슬레드는 NVMe PCIe 스토리지를 내부에 설치된 2개의 NVIDIA DPU로 직접 연결하는 대형 PCIe 스위치입니다. BMC, 관리 NIC 및 M.XNUMX SSD와 같은 패브릭과 관련된 몇 가지 액세서리 구성 요소도 있습니다.

그것은 알고리즘입니다

위에서 설명한 것처럼 Ceres는 초고밀도 플래시 용량 구성을 제공하는 새로운 눈금자 기반의 고밀도 SSD를 특징으로 합니다. 시간이 지남에 따라 표면적이 더 큰 눈금자 기반 플래시 드라이브는 기존 NVMe 드라이브보다 더 많은 플래시 용량을 수용할 것으로 예상됩니다. VAST는 솔리다임 15U 랙 공간에서 최대 30TB의 원시 플래시를 제공하는 675TB 및 1TB 길이의 통치자를 인증합니다.

솔리다임은 지난 2017월 SK하이닉스가 인텔 낸드와 SSD 기술을 인수한 데 이어 출시됐다. Solidigm은 SK hynix Inc.의 독립 미국 자회사로 운영됩니다. 산호세에 기반을 둔 새로운 자회사는 인수한 Intel 자산의 제품 개발, 제조 및 판매를 관리합니다. Intel/Solidigm "ruler" 폼 팩터는 1년에 도입되었으며 공식적으로 E1.L 및 E1.S로 알려져 있습니다. Solidigm은 이 폼 팩터 설계로 광범위한 제품 포트폴리오를 제공하고 고밀도 스토리지(E1.L), 확장 가능한 성능(E2.S) 및 메인스트림 3U 서버(EXNUMX)에 대한 유연한 최적화를 포괄하는 옵션을 제공합니다.

VAST Data의 유사성 기반 데이터 감소 알고리즘을 통해 Ceres는 평균 2:3 데이터 감소 비율로 인클로저당 거의 1PB의 유효 용량을 관리할 수 있습니다. 또한 VAST의 쓰기 셰이핑 기술은 QLC 플래시 내구성을 확장합니다. 동시에 고급 삭제 코딩은 초고용량 저장 장치를 재구축하는 시간을 크게 단축합니다.

Ceres는 고밀도 스토리지 시스템을 다룰 때 고객이 직면한 여러 가지 문제를 해결하도록 설계되었습니다. 이 시스템은 전면과 후면 모두 서비스가 가능하도록 설계되어 케이블 관리가 필요하지 않거나 시스템을 랙 안팎으로 밀어 넣을 필요가 없습니다.

Ceres 플랫폼은 수백 페타바이트까지 원활한 클러스터 확장을 지원하는 동시에 338TB의 최소 용량 진입점으로 초기 하드웨어 비용을 줄입니다. 적은 수의 하드웨어로 랙 규모의 복원력이 향상되어 Universal Storage 클러스터에서 전체 인클로저 장애 복구가 가능합니다. 고객은 이전 세대의 VAST 지원 하드웨어와 Ceres를 유연하게 혼합하여 무한한 클러스터 수명 주기를 사용할 수 있습니다.

NVIDIA 고객에게 제공되는 이점을 확장하여 NVIDIA의 부사장 겸 DGX 시스템 총괄 책임자인 Charlie Boyle은 다음과 같이 말했습니다.

“AI 인프라가 전 세계적으로 광범위하게 채택됨에 따라 기업 수준의 단순성과 탄력성은 NVIDIA의 중요한 성공 요인입니다. 아키텍처의 성능, 비용 효율성 및 단순성이 DGX SuperPOD 솔루션과 이에 의존하는 고객의 요구 사항을 충족하기 때문에 우리는 VAST와 파트너 관계를 맺었습니다. VAST Universal Storage 및 Ceres 플랫폼을 통해 NVIDIA 고객은 BlueField 혁신으로 구동되는 탁월한 성능, 보안 및 효율성을 통해 AI 데이터 센터 전체에서 종단 간 NVIDIA DPU의 이점을 실현할 수 있습니다.”

VAST 및 NVIDIA SuperPod 등

또한 VAST와 NVIDIA는 최근 발표된 NVIDIA DGX SuperPOD 구성에 도입된 것과 같은 클라이언트 측 DPU로 제로 트러스트 보안 및 오프로드 기능을 지원하는 새로운 스토리지 서비스에 대해 협력하고 있습니다. NVIDIA와의 협력 노력의 일환으로 VAST는 NVIDIA DGX SuperPOD용 Ceres를 인증하고 있습니다. SuperPOD 제품은 대규모 AI 워크로드용으로 설계되어 고성능 스토리지와 네트워킹을 결합하여 기업 고객에게 턴키 AI 데이터 센터 솔루션을 제공합니다.

업계의 AI 전환을 처리하도록 설계된 SuperPod 슈퍼컴퓨팅 인프라는 완전히 통합된 시스템으로 배포됩니다. VAST의 DASE로 지원되는 Ceres는 SuperPod의 데이터 플랫폼 기반입니다. 이 Ceres 플랫폼 설계는 처음에 AIC 및 Mercury Computer와 같은 VAST 설계 파트너에서 제조할 것입니다. VAST Universal Storage 클러스터의 데이터 용량 빌딩 블록 역할을 합니다.

Ceres를 통해 NVIDIA 고객은 이제 엑사바이트 프로덕션 데이터에서 VAST의 99.9999% 가용성 추적 기록으로 입증된 스토리지 복원력을 획기적으로 개선하는 시스템 아키텍처를 통해 무한한 수준의 규모와 성능으로 NAS 솔루션의 단순성을 즐길 수 있습니다. 올플래시 성능과 아카이브 스토리지의 경제성을 갖춘 VAST는 NVIDIA DGX SuperPOD 고객이 쉽게 AI 교육 인프라를 확장하여 레거시 계층 스토리지 아키텍처로 인한 성능 및 용량 절충 없이 엑사바이트 데이터를 지원할 수 있도록 합니다. VAST가 DGX SuperPOD에서 확장 AI 개발을 간소화하는 방법에 대해 자세히 알아보려면 여기를 읽어보세요.

NVIDIA DGX SuperPOD에 대한 VAST Data Universal Storage 인증은 2022년 중반까지 제공될 예정입니다.

결론

세계 최대 규모의 컴퓨팅 환경을 보유한 조직에서는 이미 Ceres를 선택했습니다. VAST는 Ceres 플랫폼에 배포할 170PB 이상의 데이터 용량을 지원하는 소프트웨어 주문을 받았습니다.

VAST는 무엇보다도 소프트웨어 회사이지만 하드웨어는 엔터프라이즈 스토리지 시장에 무엇이 준비되어 있는지에 대한 흥미로운 관점을 제공합니다. 일부 공급업체는 여전히 전통적인 서버 접근 방식을 사용하여 x86 하드웨어를 중심으로 구축된 플랫폼의 경로를 따라 이동하고 있지만 VAST는 다른 경로를 선택하고 있습니다. 스토리지 및 네트워킹 구성 요소가 발전함에 따라 스토리지 서버 설계도 진화해야 하지만 기존 서버 모델은 수년 동안 잘 수행되었습니다.

VAST Data Ceres DNodes는 최대 675TB의 QLC 플래시(데이터 압축 전)와 6.4TB의 SCM을 800개의 NVIDIA BlueField DPU와 결합하여 1U 상자에서 86Gb/s 이상의 연결성을 제공합니다. 이는 x22 서버인 중개인을 제거하고 이를 PCIe 스위칭 패브릭으로 교체하여 1개의 E8.L 및 2개의 U.XNUMX SSD를 XNUMX개의 DPU에 직접 연결함으로써 가능합니다. 무거운 작업을 수행하는 DPU와 VAST 소프트웨어를 사용하면 추가 작업이 거의 필요하지 않습니다.

우리는 VAST Data Ceres의 하드웨어 혁신을 절대적으로 좋아하지만 소프트웨어가 모든 차이를 만듭니다. SSD 내구성을 보호하기 위한 쓰기 셰이핑, 용량을 여러 번 확장하기 위한 데이터 감소 및 표준 기능을 단순하게 만드는 GUI는 최고의 히트작입니다. VAST를 사용하면 최종 결과는 데이터 노드 플랫폼의 모든 혁신 덕분에 유익한 비용 경제성을 수반하는 놀랍도록 유능한 클러스터입니다. 방대한 데이터를 처리하는 것뿐만 아니라 분석이 제공하는 통찰력을 기반으로 비즈니스 의사결정을 내리려는 조직은 VAST 데이터 데모 곧.

VAST 데이터

이 보고서는 VAST Data에서 후원합니다. 이 보고서에 표현된 모든 견해와 의견은 고려 중인 제품에 대한 우리의 공정한 견해를 기반으로 합니다.

StorageReview에 참여

뉴스레터 | 유튜브 | 팟캐스트 iTunes/스포티 파이 | 인스타그램 | 트위터 | 페이스북 | 틱톡 서비스 | RSS 피드