Standard Performance Evaluation Corp. (SPEC) 發布了其存儲解決方案基準測試的主要新版本，旨在幫助 IT 經理做出更好的採購、配置和優化決策。
SPEC 存儲小組委員會主席 Don Capps
Standard Performance Evaluation Corp. (SPEC) 發布了其存儲解決方案基準測試的主要新版本，旨在幫助 IT 經理做出更好的採購、配置和優化決策。
新的 SPECstorage Solution 2020 基準測試基於實際應用程序和真實場景。 它包括用於人工智能 (AI) 和基因組學的新工作負載、擴展的自定義工作負載功能、大幅改進的擴展以及用於顯示基準測試結果的統計可視化機制。 還有許多升級使基準測試更易於使用並且更有效地提供結果。
真實世界的工作負載
SPECstorage Solution 2020 基準中的工作負載代表五個不同市場中使用的應用程序。 每個工作負載都有一組通過-失敗標準，必須滿足這些標準才能驗證基準測試結果。 標準示例包括：
- 被測存儲解決方案是否保持了請求的持續平均 op_rate。
- 解決方案是否將平均延遲保持在給定閾值以下。
- 解決方案是否在工作負載的子組件之間保持了操作的平等平衡。
- 對於工作負載中的任何子組件，解決方案是否保持低於特定閾值的最大延遲。
新的 AI 工作負載代表 AI Tensorflow 圖像處理環境，跟踪從運行 COCO、Resnet50 和 CityScape 數據集的系統收集。 指標基於同時進行的數量 工作— 定義為包含一個完整工作流的一組子組件 — 可以在定義的通過/失敗標準下維持。
新的基因組學工作負載來自商業和研究機構用於執行基因分析的 I/O 操作痕跡。 數據已經過清理，因此它不包含任何原始基因組數據。 指標基於在工作負載的通過-失敗標準下可以維護的同時作業的數量。
2014 年 2 月發布的 SPEC SFS 2017 SPXNUMX 基準測試繼承了三個工作負載：
- 電子設計自動化 (EDA) 工作負載代表 EDA 應用程序混合的典型行為，包括前端和後端處理。 指標基於可以在一組定義的通過/失敗標準內完成的作業數量。
- 軟件構建環境工作負載包括源自實際應用程序分析和系統跟踪的元數據密集型測試。 指標基於在通過-失敗標準下可以完成的同時構建的數量。
- 視頻數據採集工作負載 (VDA) 模擬存儲從時間敏感源（例如監控攝像頭）採集的數據的應用程序。 指標基於在通過-失敗標準下可以捕獲的視頻流的數量。
定制工作負載
新的基準測試使用戶能夠定制現有的工作負載或創建新的工作負載以深入了解存儲性能問題。
自定義工作負載可以容納 Unix 和 Windows 負載生成器的組合，適用於在其工作流中使用此組合的應用程序。 這種組合的一個例子是 Windows 系統收集傳感器數據並使用 SMB 存儲它，而基於 Unix 的計算場使用 NFS、Lustre、GPFS 或其他文件系統技術分析數據。
SPECstorage Solution 2020 基準測試中的複雜同步機制使所有地理分佈的負載生成過程以亞毫秒級分辨率保持同步。
以更少的約束進行大規模擴展
SPECstorage Solution 2020 中新的內部 IPC 機制顯著減少了 TCP 端口和 DNS 查找的數量，提高了可擴展性、可靠性以及啟動和運行時性能。 擴展已經從之前版本的 60,000 個負載生成進程增加到可以分佈在世界各地的超過 4 萬個進程。
複雜的同步機制使所有地理分佈的負載生成過程以亞毫秒分辨率保持同步。
新的擴展效率對於測試基於雲的存儲解決方案尤為重要。 這是一個重要的發展，因為在雲提供商中，TCP 端口是一種稀缺資源，大多數虛擬機最多只能容納幾千個。 新基準從不要求超過 1,000 個 TCP 端口。 這使用戶能夠擴展多達 4 萬個進程，而不會遇到雲限制。
SPECstorage Solution 2020 中的新統計可視化機制允許用戶提取運行時計數器並將它們連接到數據庫以進行可視化。
可視化以獲得更深入的見解
SPECstorage Solution 2020 中的新統計可視化機制允許用戶提取運行時計數器並將它們連接到 Graphite、Carbon 或 Grafana 等數據庫以進行可視化。 這可以更深入地了解被測系統的行為和操作細節。
現在可以下載
SPECstorage Solution 2020 基準測試適用於 立即下載 在 SPEC 網站上以 2,000 美元的價格購買，合格的研究和學術機構可享受折扣。 新基準測試的結果與過去 SPEC 存儲基準測試的結果不可比。
積極參與基准開發的 SPEC 企業成員包括戴爾、IBM、英特爾、iX Systems、NetApp、Pure Storage 和 WekaIO。 支持個人貢獻者包括 Udayan Bapat、Sorin Faibish 和 Brian Pawlowski。
###
Don Capps 在存儲系統性能工程方面擁有 30 多年的經驗。 他是 Netapp 的性能工程師； Iozone.org 的創始人，Iozone.org 是一個非營利組織，生產和分髮用於測量計算機存儲系統性能的免費軟件； Standard Performance Evaluation Corp. (SPEC) 存儲小組委員會主席。
參與 StorageReview
電子報 | YouTube | 播客 iTunes/Spotify | Instagram | Twitter | Facebook | RSS訂閱
