首頁 Enterprise Dell PowerEdge R660 E3.S 背板評測

Dell PowerEdge R660 E3.S 背板評測

by 萊爾·史密斯

Dell PowerEdge R660 是一款 1U 機架式服務器,旨在支持最新和最先進的服務器技術,包括 E3.S Gen5 存儲、DDR5 內存和採用液體 CPU 冷卻的配置。 它支持兩個處理器(雙插槽)、32 個 RDIMM 和最多三個顯卡。

Dell PowerEdge R660 是一款 1U 機架式服務器,旨在支持最新和最先進的服務器技術,包括 E3.S Gen5 存儲、DDR5 內存和採用液體 CPU 冷卻的配置。 它支持兩個處理器(雙插槽)、32 個 RDIMM 和最多三個顯卡。

雖然它是一個緊湊的 1U 外形,但這款新的戴爾服務器可以配備多達 16 個 SSD。 PowerEdge R660 是 R650 的後繼產品,專為各種不同的應用而設計——從通用用途到 HCI/HPC。

Dell PowerEdge R660 E3.S 正面

Dell PowerEdge R660 E3.S 背板評測構建

我們之前測試了 戴爾PowerEdge R660,配置有五個 800GB SAS3 SSD (RAID5)、512GB DDR5 RAM 和雙 Intel Xeon Platinum 8452Y CPU。

對於本次評測,我們正在通過為其配備兩個 Intel 8460Y Platinum CPU(一個不錯的升級)、16 個 4800GB 5MHz DDR1743 RAM 模塊和八個 Samsung PM7.68 3GB E5.S SSD 來改變它。 這種配置無疑會產生不同的性能結果,尤其是使用 Gen3 EXNUMX.S SSD 和更高端的 CPU 時。

戴爾 PowerEdge R660 E3.S 三星 PM1743

例如,之前評測中使用的 Intel 8452Y 具有 36 核和 72 線程,基本頻率為 2.00GHz(以及 3.70GHz 最大睿頻),睿頻時鐘最高可達 3.8GHz。 另一方面,英特爾 8460Y 共有 40 個內核和 80 個線程,基本頻率為 2.00GHz(以及 3.70GHz 最大睿頻)。 核心和線程的增加將提供幾個顯著的好處,包括改進的性能和多任務處理(它可以同時處理更多的請求、進程和用戶)、增加的可擴展性和提高的能源效率。

Dell PowerEdge R660 E3.S 托架

使用 E3.S 固態硬盤 也會影響 R660 的整體性能和功能。 PM1743 使用最新的 EDSFF E3.S 外形規格,提高了信號完整性和性能,同時擁有高達 15.36TB 的存儲容量(我們在本次評測中使用的是 8GB 型號的 7.68 倍)。 其纖薄的 7.5 毫米外形還允許在企業服務器中實現更高的存儲密度,從而提高每個機架單元的性能和能效。

Dell PowerEdge R660 E3.S 連接器

然而,最重要的是 PM1743 的雙端口配置,即使一個端口出現故障,它也能確保不間斷和連續的計算。 由於能夠將工作負載無縫轉移到第二個端口,它可以幫助保持業務連續性並防止因端口故障造成的任何中斷。 對於依賴 24/7 全天候運營的所有類型的企業而言,這是一項重要功能。

戴爾 PowerEdge R660 與 R650

與上一代 R650 相比,值得注意的更新包括對英特爾“Sapphire Rapids”第四代至強可擴展處理器的支持。 如上所述,本次評測使用的是 Intel 8460Y; 這些新芯片最多可擴展到 56 個內核(此外還有 DDR5 內存並支持 Gen5 存儲)。 它們還具有改進的 AI 和加密加速功能。 通過增加對 PCIe Gen5 的支持,新服務器可以提供更高的帶寬來處理數據密集型工作負載。

存儲配置也是其最大的優勢之一。 傳統存儲最多可擴展到十個 2.5 英寸 SAS/SATA 驅動器,但它也可以使用 Gen5 NVMe SSD。 如前所述,新的背板選項還包括對多達 16 個 E3.S(7.5 毫米)驅動器的支持。 還有用於啟動的後置驅動器選項,包括新的 NVMe BOSS 驅動器。 NVMe BOSS 驅動器可以釋放寶貴的驅動器托架,同時提供快速啟動和恢復時間。

該服務器提供一系列電源選項以滿足不同需求,包括 AC Platinum(800W、1400W)和 AC Titanium(700W、1100W、1800W)電源。 這些電源非常高效,有助於降低整體能耗和成本。 該服務器還支持 1100W LVDC @-48VDC 輸入,適用於具有不同電源要求的數據中心環境。

Dell PowerEdge R660 規格

中央處理器
  • Sapphire Rapids(Bronze、Silver、Gold5、Gold6、Platinum),每個處理器最多 56 個內核
  • 支持多達 2 個 350W 處理器
  • 直接液體冷卻支持
記憶體應用
  • 多達 32 個 DDR5 RDIMM
  • DIMM 速度:高達 4800 MT/s
儲存應用
  • 最多 10 個 2.5” SAS/SATA HDD/SSD; 或 NVMe SSD
  • 多達 16 個 E3.S NVMe Gen5 DUAL PERC*
  • 多達 14 個 E3.S NVMe Gen5 直接連接*
  • 最多 2 個 2.5”(後置)SAS/SATA HDD/SSD; 或 NVMe SSD
  • 多達 2 個 E3.S(背面)NVMe Gen5*
  • 用於引導的後置 BOSS-N1 (2xM.2 NVMe)
  • 內部:USB
  • 帶寬:SAS4-24Gb、SAS3-12Gb、SATA-6Gb
儲存控制器
  • 硬件 RAID:PERC 11 和 12(雙 PERC 選項)
  • 硬件 SAS4/SATA/NVMe RAID (PERC12)
  • SW RAID:是的
網絡 可選 2 x 1GbE LOM 和/或 1 x OCP 3.0
PCIe插槽 最多 3 個 PCIe 插槽(最多 2 個 PCIe Gen5),SNAP I/O 選項
GPU 3 個軟件 GPU
集成端口
  • 正面:1 個 USB 2.0、1 個 iDRAC Direct (Micro-AB USB) 端口、1 個 VGA
  • 背面:1 個專用 iDRAC 以太網端口、1 個串行端口(可選)、1 個 USB 2.0、1 個 USB 3.0、1 個 VGA(液體冷卻配置可選)
  • 內部:1 個 USB 3.0(可選)
系統管理
  • iDRAC9、iDRAC Direct、iDRAC RESTful API with Redfish、iDRAC 服務
  • 模塊、Quick Sync 2 無線模塊、OpenManage Enterprise 和插件
  • (電源管理器、SupportAssist、更新管理器)、OpenManage Mobile
高可用性
  • 熱插拔冗餘硬盤、PSU。
  • 熱插拔風扇。 熱插拔BOSS
電源供應器
  • AC(白金):800W,1400W
  • AC(鈦合金):700W、1100W、1800W
  • LVDC @-48VDC 輸入:1100W
尺寸 高 x 寬 x 深:42.8mm x 482mm x 809mm(無邊框)
外形 1U 機架式服務器

Dell PowerEdge R660 E3.S 設計和構建

由於我們在對 R660 的第一次評測中詳細介紹了設計和構建,因此我們將在此處簡要介紹一下。

在前面板上,它具有四個 E3.S 托架集群,中央堆棧未填充,以改善流向雙 Xeon 可擴展處理器的氣流。

Dell PowerEdge R660 背面

在設備的背面,它有雙 1GbE、一個 USB 2.0、一個 USB 3.0、VGA 輸出和一個用於戴爾 iDRAC 遠程管理的附加以太網端口。 還提供可選的串行端口支持,並且可以通過服務器的 OCP 3.0 插槽添加額外的網絡端口。

該裝置配備雙 1,400 瓦熱插拔電源,雙 M.2 NVMe SSD 可在左後方訪問,用作啟動驅動器,但該系統未配備 BOSS。 其他配置(如本評論)支持 Gen5 E3.S 驅動器。

戴爾 PowerEdge R660 內部

在內部,您會看到幾個冷卻風扇,它們通過驅動器托架吸入空氣,經過雙 CPU 散熱器和 DDR5 RDIMM 插槽。 服務器還支持CPU液冷方案; 但是,此功能未包含在我們的審核單元中。 該裝置的擴展槽位於後部,包括多達三個 PCIe 插槽,其轉接板允許使用全高卡。

Dell PowerEdge R660 提供了廣泛的配置選項,即使是在我們的 E3.S 構建等獨特系統中也是如此。 此設置包含我們將在下面概述的三種特定配置,包括 14 或 14+2 直連 NVMe 構建或 16 HWRAID NVMe 構建。 最新一代的 PowerEdge 服務器提供類似的配置,允許用戶利用當前一代 SSD 的硬件 RAID。

顯示的第一個配置是 16 盤位 HWRAID 設置。 這裡的驅動器分為兩組,每組 8 個驅動器,每個驅動器都流向一個專用的 PERC12 RAID 卡。 對於這些配置中的任何一種,戴爾都平衡了存儲和 I/O 需要,以便在 CPU 之間均勻分佈。

戴爾 R660 HWRAID

接下來是一個類似於之前評論的模型,有 14 個前置 E3.S 托架直接連接到主板。 它們在 CPU1 和 CPU2 上分為八組和六組。

戴爾R660直接nvme

最終的服務器配置適用於需要盡可能多的 E3.S SSD 的客戶,同時還在後部佔用一個 PCIe 托架,提供 14+2 配置,所有 16 個 SSD 直接連接到主板。

dell r660 e3s直接後置

Dell PowerEdge R660 iDRAC9 遠程管理

對於 PowerEdge R660 服務器,我們使用了戴爾的 iDRAC9 Enterprise 遠程管理軟件。 Integrated Dell Remote Access Controller (iDRAC) 是一項戴爾專有技術,允許用戶遠程訪問和管理戴爾服務器。 它為系統管理員提供了一個基於 Web 的界面來監控和管理服務器硬件,例如係統健康狀況、配置設置和固件更新。 使用 iDRAC,您無需親臨現場即可管理服務器。

如果您有興趣了解有關戴爾 R660 服務器如何由 iDRAC9 管理的更多信息,請務必查看我們的 以前的評論,我們將在其中進行更詳細的介紹。

戴爾 PowerEdge R660 CPU 基準測試

這是本次評測的戴爾 PowerEdge R660 配置:

  • 2 個 Intel Platinum Xeon 8460Y CPU
  • 16 個 16GB 4800 DDR5
  • 8 個三星 PM1743 7.68GB E3.S 固態硬盤

我們的第一個測試是 Cinebench R23,這是一種廣泛使用的基準測試工具,可測量使用 Maxon Cinema 4D 進行渲染的 CPU 和 GPU 的性能,並提供可用於比較不同系統和組件性能的分數。

PowerEdge R660(英特爾 8460Y) PowerEdge R660(英特爾 8452Y)
Cinebench R23 Multi 68,571 60,075
Cinebench R23 Single 1,029 841

y-cruncher 是一個多線程和可擴展的程序,可以將 Pi 和其他數學常數計算到數万億位。 自 2009 年推出以來,它已成為超頻玩家和硬件愛好者的熱門基準測試和壓力測試應用程序。

PowerEdge R660(英特爾 8460Y) PowerEdge R660(英特爾 8452Y)
13.966s(y 粉碎機 1b) 8.294s(y 粉碎機 1b)
35.634s(y 粉碎機 2.5b) 92.779s(y 粉碎機 10b)

Dell PowerEdge R660 存儲性能

利用八個 7.68TB Samsung PM1743 NVMe Gen5 E3.S SSD,我們專注於 Sysbench 的應用程序性能和 Vdbench 的綜合 I/O 性能。

系統性能

下一個應用程序基準包括 Percona MySQL OLTP 數據庫 通過 SysBench 測量。 此測試還測量平均 TPS(每秒事務數)、平均延遲和平均 99% 延遲。

每 系統平台 VM 配置了三個虛擬磁盤:一個用於引導 (~92GB),一個用於預建數據庫 (~447GB),第三個用於測試中的數據庫 (270GB)。 從系統資源的角度來看,我們為每個虛擬機配置了八個 vCPU 和 60GB 的 DRAM,並利用了 LSI Logic SAS SCSI 控制器。

Sysbench 測試配置(每個虛擬機)

  • 中央操作系統 6.3 64 位
  • Percona XtraDB 5.5.30-rel30.1
    • 數據庫表:100
    • 數據庫大小:10,000,000
    • 數據庫線程:32
  • 內存緩衝區:24GB
  • 測試時長:3 小時
    • 2 小時預處理 32 個線程
    • 1 小時 32 個線程

對於我們的 Sysbench 測試,我們使用了八個虛擬機,其中兩個位於每個 SSD VMware 數據存儲上。 有了這 29,086 個 VM 負載,我們可以擴展到 3,636TPS,每個 VM 平均為 XNUMXTPS。

我們測得 Sysbench VM 組的平均延遲在 8.77 毫秒到 8.80 毫秒之間。

在 Sysbench 99VM 組中測量第 8 個百分位數的延遲,總平均值為 15.87 毫秒。

VDBench 工作負載分析

在對存儲設備進行基準測試時,應用程序測試是最好的,綜合測試排在第二位。 雖然不能完美地代表實際工作負載,但綜合測試可以幫助存儲設備建立可重複性因素的基線,從而可以輕鬆地在競爭解決方案之間進行同類比較。 這些工作負載提供了一系列不同的測試配置文件,從“四個角”測試到常見的數據庫傳輸大小測試,再到來自不同 VDI 環境的跟踪捕獲。

所有這些測試都利用通用的 vdBench 工作負載生成器,以及一個腳本引擎來自動化和捕獲大型計算測試集群的結果。 這使我們能夠在各種存儲設備上重複相同的工作負載,包括閃存陣列和單個存儲設備。 我們針對這些基準測試的測試過程用數據填充整個驅動器表面,然後將驅動器部分分區為驅動器容量的 25%,以模擬驅動器如何響應應用程序工作負載。 這與完全熵測試不同,後者使用 100% 的驅動器並將其置於穩定狀態。 因此,這些數字將反映更高的持續寫入速度。

簡介:

  • 4k 隨機讀取:100% 讀取,128 個線程,0-120% 迭代
  • 4k 隨機寫入:100% 寫入,128 線程,0-120% iorate
  • 64k 順序讀取:100% 讀取,32 個線程,0-120% 迭代
  • 64k 順序寫入:100% 寫入,16 個線程,0-120% iorate
  • 128k 順序讀取:100% 讀取,32 個線程,0-120% 迭代
  • 128k 順序寫入:100% 寫入,16 個線程,0-120% iorate
  • 70R/30W 和 90R/10W 隨機混合,64 線程,0-120% iorate
  • 綜合數據庫:SQL 和 Oracle
  • VDI 完整克隆和鏈接克隆跟踪

從隨機 4k 讀取開始,當使用八個三星 PM660 4.5GB E223.2.S SSD 時,戴爾 PowerEdge R1743 在 7.68µs 的延遲下顯示出 3 萬次 IOPS 的峰值性能。

在寫入方面,Dell PowerEdge R660 在 5.16µs 時達到 184.1 萬 IOPS 的峰值。

轉向 64k 順序性能,Dell PowerEdge R660 的峰值讀取速度為 53.1GB/s (849K IOPS),三星驅動器的延遲為 267.6µs(在最後性能下降之前)。

對於 64k 順序寫入,Dell PowerEdge R660 記錄了 23.6GB/s(約 377K IOPS)的峰值性能,耗時 301µs,最後性能略有上升。

在 128k 順序性能中,Dell PowerEdge R660 的讀取延遲為 50GB/s (400K IOPS) 和 492.7µs。

在 128k 順序寫入中,Dell PowerEdge R660 的峰值為 23.2GB/s (186K IOPS),延遲為 631.2µs。

接下來是我們的混合工作負載,從我們的混合 70/30 4k 配置文件開始(70% 讀取,30% 寫入)。 在這裡,Dell PowerEdge R660 的性能非常穩定,在 4.88µs 的延遲下發布了 97.8 萬次 IOPS 的峰值。

在我們混合的 90/10 4k 配置文件中,戴爾 PowerEdge R660 在配備三星 E4.5.S 驅動器時產生了 101.5 萬次 IOPS 的峰值,延遲為 3µs。

我們的下一組測試是我們的 SQL 工作負載:SQL、SQL 90-10 和 SQL 80-20。 從 SQL 開始,R660 服務器通過 G2.6n96.5 Samsung E3.S 驅動器發布了 5 萬次 IOPS 的峰值性能,延遲僅為 3µs。

在 SQL 90-10 中,Dell PowerEdge R660 達到了 2.5 萬次 IOPS 的峰值和 101µs 的延遲,然後在測試結束時 IOPS 略有下降。

使用 SQL 80-20,Dell PowerEdge R660 達到 2.4 萬次 IOPS 的峰值,延遲僅為 104 微秒。

接下來是我們的 Oracle 工作負載:Oracle、Oracle 90-10 和 Oracle 80-20。 從一般 Oracle 工作負載開始,R660 在 2.2µs 時的峰值性能為 108.4 萬次 IOPS。

查看 Oracle 90-10,Dell PowerEdge R660 在 1.64µs 時發布了 104.3 萬次 IOPS 的峰值性能(最後性能略有上升)。

接下來是 Oracle 80-20,其中 Dell PowerEdge R660 在 1.56µs 時達到 109 萬 IOPS 的峰值。

接下來,我們切換到我們的 VDI 克隆測試,完整和鏈接,其中 9400 繼續其出色的性能。 對於 VDI 完整克隆 (FC) 啟動,Dell PowerEdge R660 在 1.97 萬 IOPS 下與三星驅動器的延遲為 126.7µs。

轉到 VDI FC 初始登錄,Dell PowerEdge R660 的峰值為 1.21 萬 IOPS,延遲為 143.8µs。

借助 VDI FC Monday Login,Dell PowerEdge R660 在 809µs 的延遲下發布了 119.8K IOPS 的峰值。

對於 VDI 鏈接克隆 (LC) 引導,Dell PowerEdge R660 表現穩定,峰值為 876K IOPS,用時 118.8µs。

在 VDI LC 初始登錄中,Dell PowerEdge R660 的峰值為 375K IOPS,耗時 123.4µs。

對於 VDI LC Monday Login,Dell PowerEdge R660 的峰值為 609K IOPS,延遲為 155.2µs。

結論

正如我們之前提到的,戴爾的 PowerEdge R660 代表了其服務器產品組合向前邁出的重要一步,提供增強的冷卻能力以容納多達兩個第四代至強可擴展處理器。 這些處理器支持 DDR4 內存和 Gen5 存儲,使服務器能夠展示高性能和高密度的能力。 PowerEdge R5 還展示了戴爾對創新的承諾,提供了一個獨特的平台,為企業和企業開闢了新的性能和密度可能性。

戴爾在服務器方面的經驗體現在機箱內部組件的精心設計以及豐富的 iDRAC 9 遠程管理系統中。 內部機箱佈局支持廣泛的配置選項,同時保持不折不扣的冷卻性能,以確保這些組件可靠地運行並發揮全部性能。 iDRAC 9 允許全面的服務器運行狀況、設置、維護和支持,使控制和監督觸手可及。 也就是說,R660 最酷的功能之一是其多種存儲驅動器配置,其中包括使用 E3.S SSD 以獲得最大存儲密度。

在我們之前對 PowerEdge R660 的評測中,我們使用了五個 800GB SAS3 SSD 和 Intel Xeon Platinum 8452Y CPU。 然而,在這個新版本中,我們希望進一步提昇平台的功能,採用 Gen5 E3.S 固態硬盤——特別是八個三星 PM1743 7.68GB 固態硬盤。 我們還利用了更高端的雙 Intel Platinum Xeon 8460Y CPU。 正如您從我們的基準測試結果中看到的那樣,這些升級有助於展示這個獨特平台的更大潛力。

Dell PowerEdge R660 E3S 托架

雖然 E3.S SSD 仍處於早期階段,但它們顯然是 U.2/U.3 驅動器之後的下一步,每個閃存供應商都在將大量資源投入到這種外形尺寸中。 戴爾在 R660 方面做得很好,包括驅動器的平衡應用,而沒有限制背面 PCIe 插槽的配置以提供額外的 I/O 或加速器。 我們猜測,如果客戶想要一些其他配置,比如 20 個 SSD,並且願意交換 PCIe 插槽,戴爾可以輕鬆過渡到類似的配置。 對於這些 Intel 系統,一切都與通道分配有關,不幸的是,沒有更多可玩的了。

總體而言,PowerEdge R660 是一款令人印象深刻的服務器平台,為性能、I/O 和存儲密度設立了新標準。 其先進的冷卻能力(帶有液體選項)、對第四代至強可擴展處理器、DDR5 內存和 Gen5 存儲的支持,結合 E3.S SSD 的創新使用,使其成為廣泛應用的絕佳選擇,並且它是我們的 2023 年最佳獲獎者之一。

戴爾 PowerEdge 服務器

參與 StorageReview

電子通訊 | YouTube | 播客 iTunes/Spotify | Instagram | Twitter | 的TikTok | RSS訂閱