首頁 Enterprise 推出 Quantum Myriad 軟件定義全閃存存儲平台

推出 Quantum Myriad 軟件定義全閃存存儲平台

by 哈羅德弗里茨

Quantum Myriad™ 是一種全新的全閃存橫向擴展文件和對象存儲軟件平台,適用於現代企業工作負載。 Myriad 雲原生架構是一種易於使用的解決方案,旨在克服以硬件為中心的設計的局限性,使客戶能夠適應未來的存儲需求,同時減輕 IT 人員的負擔。

Quantum Myriad™ 是一種全新的全閃存橫向擴展文件和對象存儲軟件平台,適用於現代企業工作負載。 Myriad 雲原生架構是一種易於使用的解決方案,旨在克服以硬件為中心的設計的局限性,使客戶能夠適應未來的存儲需求,同時減輕 IT 人員的負擔。

Quantum Myriad 是該公司的全新產品,與其他各種存儲設備和歸檔解決方案並列。 Myriad 的不同之處在於它是一種專為最新閃存技術設計的無共享架構,可在任何規模下提供一致的低延遲性能。

儘管它是全新的,但 Quantum 推出了一組強大的內聯數據服務,例如重複數據刪除、壓縮、快照、克隆和元數據標記,旨在加速 AI/ML 數據處理。 在操作上,熟悉且經過驗證的雲技術(如微服務和 Kubernetes)用於提供雲的簡單性。 最終,Quantum 將 Myriad 設計為一個零接觸存儲、集群和網絡管理平台,可以在不中斷的情況下輕鬆擴展、更改和收縮系統。

Quantum 首席開發官 Brian Pawlowski 表示:

“為了跟上數據增長的步伐,業界已經‘投入硬件’來解決這個問題。 整合客戶、合作夥伴和行業分析師對當前市場解決方案缺失的反饋,我們對 Myriad 採取了完全不同的方法,結果就是我 20 年來一直想要構建的架構。 Myriad 是一款極其簡單、適應性極強的存儲軟件,適用於不可預測的未來。”

量子無數軟件

無數軟件在標準 x86 存儲服務器上運行,使 IT 團隊可以輕鬆採用最新硬件。 這當然包括最新的存儲外形、NAND 技術和滿足未來需求的接口,以及未來新的 I/O 選項和潛在的加速卡。

作為大多數軟件的典型代表,Myriad 包含許多交互以提供內部功能和麵向客戶的服務的組件,在這種情況下,存儲和檢索文件和對象。 軟件組件和功能是典型的分層模型,平行於系統中的數據流。 Quantum 將這些層從上到下描述為客戶端、數據服務、文件系統和事務鍵/值存儲。 每個層和組件都旨在減少延遲並最大限度地提高並行性。

單獨查看每個組件,很容易看出並行運行這些組件很有意義,可以提供更好的性能和功能。 讓我們從堆棧的頂部開始分解它。

客戶端組件包括 NFS 服務器進程、SMB、S3、專有服務和 GPU-Direct 服務。 客戶端組件與自定義 Myriad 文件系統的實例交互。 可以定義任意數量的文件系統,每個文件系統都有一個或多個關聯的表示層。 可以使用 NFS 和 S3 表示定義一個文件系統,從而允許訪問與文件和對象相同的數據。 文件系統的數量沒有限制,可以配置它們以滿足業務需求。

數據服務層支持始終在線的內聯重複數據刪除和壓縮、快照和克隆等功能。 文件系統層是完全分佈式和可組合的,它可能是每個用戶或應用程序一個文件系統。

事務性鍵值存儲是所有數據和元數據的中央存儲庫。 這是系統的核心,分佈在 Myriad 集群中的所有存儲節點上,並且隨著節點添加到集群中而線性增加。 鍵值存儲使用獨特的動態擦除編碼 (EC) 方案將數據存儲在 NVMe SSD 上,該方案可根據事件實時調整,保持保護並最大限度地提高效率。

無數集群架構

Myriad 被設計為一種靈活、自我修復、自我平衡的軟件,允許在服務中升級,在後台自動重建和修復數據,同時在存儲集群根據客戶需求進行調整的同時重新平衡數據。 憑藉自動檢測、部署和配置集群內存儲節點的智能,集群無需干預即可擴展、修改或收縮,IT 管理員可以專注於其他重要功能。

儘管 Myriad 軟件被設計為可以在任何地方運行,但最初的版本是在 Quantum iron 上提供的。 Myriad 集群架構如下圖所示。

無數的管理門戶

安全的在線門戶通過連接到昆騰基於雲的 AI 操作軟件,提供對系統健康狀況、性能和容量趨勢的實時監控。 無需專門的管理服務器來運行 Myriad 集群。 Myriad 通過內置快照、克隆、快照恢復工具和回滾功能提供簡單的數據安全和勒索軟件恢復。

無數的硬件規格

Quantum 為每個集群組件定義了硬件要求,以便輕鬆選擇所需的硬件。 如前所述,初始版本將在 Quantum 提供的設備上提供。 硬件要求很簡單,不包含任何異常的東西。

存儲節點規格

存儲節點是提供計算和存儲服務的標準服務器。 在 GA,一個集群由五到十個存儲服務器組成。 1U 設備在具有 64GB RAM 的 512 核 CPU 上運行,支持 PCIe Gen4。 每台服務器在正式發佈時支持十個 15.36 TB 的單端口 TLC 驅動器。 網絡連接通過四個 100GbE 端口實現,管理通過一個 1GbE RJ-45 實現。 Quantum 設備具有雙電源和冗餘風扇組件。

NVMe 存儲節點位於集群的核心,是 SSD 的所在地,並運行 Myriad 軟件和服務。

負載均衡器節點規格

這是一個相當通用的交換機,它將集群連接到客戶網絡並平衡集群和集群內的入站流量。 該集群需要兩台 1U 交換機,帶有 32 個 100GbE 網絡端口和一個 1GbE RJ-45 管理端口。 Quantum 的交換機將具有雙電源和冗餘風扇。

部署節點規範

該節點部署軟件並配置集群中的其他節點。 部署節點不在數據路徑中。 每個集群需要一個部署節點。 這些節點配置有 48 個 1GbE 端口、一個 1GbE RJ-45 管理端口,並且與其他設備一樣,具有雙電源和冗餘風扇。

Deployment節點負責集群的部署和維護,包括初始安裝、擴容、軟件升級等。

無數的網絡

無數節點通過設計簡單的 100GbE 連接。 除了實際連接網絡外,客戶幾乎無事可做。 無數節點是自動配置的,不需要額外的硬件或客戶交互。 Myriad 為配置和控制功能提供直觀的 GUI,還支持 SNMP 和 sFlow 監控。

集群節點通過兩個網絡互連:一個 100GbE 無損網絡,帶有 RDMA 用於數據和管理流量,一個 1GbE 網絡用於部署任務。 安裝時,可以選擇為內部網絡提供不可路由的子網或接受默認的 172.16/16。 所有集群節點和 Kubernetes pod 的內部接口都分配了這個範圍內的地址。 添加到集群的任何新節點都會自動分配一個來自所選子網的地址。

Load Balancer 節點使用 NAT 將內部集群網絡與數據中心網絡隔離開來。 負載均衡器節點使用等價多路徑 (ECMP) 路由來跨存儲節點傳播傳入連接。 無數外部網絡使用邊界網關協議 (BGP) 路由協議,使與外部網絡的連接變得簡單。 客戶交換機需要為 ECMP 未編號的 BGP 配置面向 Myriad 的端口。

雲中無數

雖然初始版本是在專用設備上提供的,但該架構旨在將 Myriad 部署在 AWS 等公共雲基礎設施上。 Myriad 的雲部署可以利用底層雲平台服務,但軟件和整體體驗是相同的。

對於雲部署,由於 Myriad 軟件在 Kubernetes 集群中運行,因此 Myriad 將使用 AWS EKS 等雲 Kubernetes 服務。 Myriad 負載均衡器功能將使用云網絡和負載均衡服務。

市場影響

Myriad 擴展了 Quantum 的非結構化數據解決方案組合。 它適用於需要更高性能和規模的新興用例,包括 AI/ML、數據湖、VFX 和動畫渲染,以及其他高帶寬和高 IOP 應用程序。

雖然可能有許多針對這些工作負載的解決方案,但在現代從頭開始開發的解決方案很少。 對於 Quantum 來說,採用他們現有的解決方案之一,塗上一層新的口紅,如容器存儲界面,並將其稱為新解決方案會更容易。 但昆騰選擇冒著巨大的風險將全新的解決方案推向市場,該解決方案是從頭開始設計的。 Quantum 對最終結果非常滿意,同時也承認還有更多工作要做,以便在客戶開始親身實踐並積累反饋時將功能引入 Myriad。

說到實際操作,我們打算很快使用 Myriad 套件訪問 Quantum 數據中心,我們已經安排了訪問。 對於那些等不及我們的完整報告的人來說,Quantum Myriad 現在可供搶先體驗客戶使用,併計劃在今年第三季度正式發布。

www.quantum.com

參與 StorageReview

電子通訊 | YouTube | 播客 iTunes/Spotify | Instagram | Twitter | 的TikTok | RSS訂閱