EchoStreams GridStreams 是一個 2U、高密度四節點服務器平台,專為高性能數據中心和開放計算聯盟雲服務提供商而設計。 四個節點中的每一個都具有半寬主板,支持單或雙英特爾至強 2600 處理器,並根據主板配置提供一個或兩個 PCIe 擴展槽空間。 GridStreams 在中間提供一組八個 7mm 2.5" 驅動器托架,設計為在計算節點之間各共享兩個。配置為數據中心使用,節點和驅動器托架可從機箱前部維修,兩者都是熱插拔的. 機箱背面只有風扇和電源,設計用於在新的數據中心環境中更換,其中機架為服務器機箱提供 12VDC 和冷卻氣流。
EchoStreams GridStreams 是一個 2U、高密度四節點服務器平台,專為高性能數據中心和開放計算聯盟雲服務提供商而設計。 四個節點中的每一個都具有半寬主板,支持單或雙英特爾至強 2600 處理器,並根據主板配置提供一個或兩個 PCIe 擴展槽空間。 GridStreams 在中間提供一組八個 7mm 2.5" 驅動器托架,設計為在計算節點之間各共享兩個。配置為數據中心使用,節點和驅動器托架可從機箱前部維修,兩者都是熱插拔的. 機箱背面只有風扇和電源,設計用於在新的數據中心環境中更換,其中機架為服務器機箱提供 12VDC 和冷卻氣流。
GridStreams 加入了 StorageReview 測試實驗室 作為測試的關鍵組件 高性能全閃存存儲陣列 在我們新的數據庫和軟件應用程序測試環境中。 計算密集型 2U 四節點系統將提供在我們即將進行的應用程序測試中有效地對高端存儲設備施加壓力所需的系統資源。 綜合基準測試不需要(相對而言)大量系統資源來運行,即使在綜合工作負載中生成 1-2MM IOPS 時,也可以包含在單個雙 CPU 服務器上。 從實際應用程序中消耗如此多的 I/O 需要成倍增加的資源,需要比單個服務器中包含的更多的 CPU 內核和 RAM。 為了在 StorageReview 測試實驗室複製這些負載,我們使用各種系統和配置,包括四節點 EchoStreams GridStreams,為我們提供運行最新應用程序基準測試所需的計算密集型資源。
EchoStreams 網格流規範
- 機箱高度:2U
- 計算節點:4
- 主板:半寬至 18" 深
- 芯片組:Intel C602
- 處理器(每個節點)
- 配置:2 x Intel E5-2640(2.5Ghz,15MB 緩存,6 核)
- 支持:2 x Intel Socket 2011 / Xeon E5-2600 系列
- 內存(每個節點)
- 配置:128GB (16 x 8GB)
- 插槽總數:16(每個 CPU 4 通道,每個 CPU 8 個 DIMM)
- 最大 512GB RDIMM/最大 128GB UDIMM
- 存儲(每個節點)
- 配置:2 x 100GB Micron RealSSD P400e
- 2 x 2.5" 7mm 硬盤或 SSD
- 2 個 SATA 6.0Gb/秒
- I/O 擴展(每個節點)
- 配置: Mellanox ConnectX-3 QDR InfiniBand 56Gb/s 網卡
- 1 個 PCIe x16(Gen3 x16 鏈路)
- 電源(每個節點):400W 開放式框架 PSU
- 機箱冷卻:4 x 熱插拔 80mm 風扇
- 前面板(每個節點)
- 帶 LED 的電源開關
- 帶 LED 定位開關
- 重置開關
- 系統警告 LED
- 板載連接(每個節點)
- 2 x 英特爾服務器級 GbE LAN
- 1 個支持 iKVM 的管理 LAN
- 可選的板載單端口 Mellanox ConnectX-3 QDR InfiniBand
硬體選項
EchoStreams GridStreams 四節點服務器基於商用硬件,這意味著硬件選項可以取決於購買者的需求。 隨附的系統 StorageReview 提供了多種連接選項,從板載 SAS 和 SATA 到以太網和可選的板載 InfiniBand。 每個節點都支持單處理器和雙處理器配置,目前 EchoStreams 支持 Intel Xeon E5-2600 處理器。
在 GridStreams 框架內配置本地存儲的方式是按節點; 每個節點都通過插座連接器連接到前面八個 7mm SSD/HDD 托架中的兩個。 根據定義,每個節點都是獨立的,並且可以在需要服務時快速斷開連接和拉出。 集成 RAID 也是一個選項,它允許在兩個硬盤驅動器或 SSD 上進行 RAID1 配置,以應對驅動器故障。 在我們的實驗室中,我們使用兩個 美光 P400e SSD 對於沒有冗餘的多操作系統環境中的每個計算節點。 一個 SSD 使用 CentOS 6.3 和另一個 Windows Server 2012 啟動節點。
為了滿足我們實驗室的獨特需求,我們提供了自己的 Mellanox ConnectX-3 InfiniBand NIC 佔用每個節點中的單個 PCIe 3.0 插槽。 InfiniBand 因其在我們最新的應用程序基準測試中所需的高吞吐量和低延遲屬性而被特別選擇。 如果客戶要求,每塊主板還可以配備板載 Mellanox ConnectX-3 QDR 接口,騰出單個 PCIe 插槽用於其他用途。 這為每個系統提供了極大的靈活性,並允許最終用戶充分利用每個節點。
監控和管理
每個節點都包含一個專用以太網端口,用於通過 iKVM 接口進行板載管理。 iKVM 支持控制台重定向和遠程驅動器託管,允許管理員遠程設置或診斷系統,而無需直接連接到系統。 GridStreams iKVM 接口廣泛用於每個節點的初始設置,以便在測試實驗室中快速使平台上線。
隨附的管理軟件還支持遠程電源控制,並為用戶提供第二熱、電源和冷卻信息。 只需一眼,用戶就可以檢查 PSU 電壓引線、風扇速度以及主板和 CPU 溫度。 這些傳感器中的每一個都可以記錄,提供了一個機會來監控從空閒到重載的條件如何變化,以確保系統為他們的環境正確配備。
設計和建造
EchoStreams GridStreams 的獨特設計將主板和 I/O 連接置於機箱的前部而不是後部,為專為這種佈局設計的數據中心提供了更大的靈活性。 儘管 StorageReview 實驗室有一個傳統的機架安裝環境,我們仍然能夠將 GridStreams 與穿過我們其中一個插槽的電纜進行集成 伊頓S系列貨架. 對於板載網絡連接,節點包括兩個 Intel 1GbE 端口以及另一個專用於 iKVM 管理的 1GbE 端口。 前檢修面板上還有一個用於單個 QSFP InfiniBand 端口的切口,可在配備此可選附件的主板上找到。
GridStreams 服務器更獨特的設計方面之一是機箱前部的熱插拔驅動單元。 雖然許多計算節點在節點內嵌入了雙存儲托架,但 EchoStreams 採取了不同的路徑。 在 GridStreams 機箱中,每個節點都可以直接訪問兩個托架,通常配置為 RAID1 用於冗餘系統驅動器。 我們的配置利用 美光 100GB RealSSD P400e 固態硬盤 適用於 CentOS 6.3 和 Windows Server 2012 引導驅動器。
EchoStreams GridStreams 專為在生產環境中輕鬆維護而設計,每個節點都安裝在一個托盤上,托盤可以輕鬆滑出以快速移除主板和 PCIe 接口。 每個托盤使用快速釋放電源和數據連接與機箱連接。 這種設計讓用戶可以在機架環境之外以易於管理的塊設置新硬件或服務單個節點,而無需將整個系統拖出機架。
EchoStreams 為 GridStreams 服務器提供滑軌,利用快速連接配件輕鬆地將滑軌安裝在機架中並將系統滑入到位。 雖然導軌在服務器安裝到我們的機架環境後允許一些延伸,但它們不能完全延伸以服務整個機箱,除非將其完全移除。 考慮到前置節點接入和後置風扇接入,用戶唯一需要從機架上卸下整個機箱的時間是在電源出現故障的情況下。
散熱
EchoStreams GridStreams 提供獨特的從前到後的冷卻設計,其中包含四個位於機箱後部的 80mm 風扇。 這四個風扇為 GridStreams 提供唯一的冷卻和氣流; 首先在 PCIe 卡和 SSD 或硬盤驅動器上吸入冷空氣,其次是處理器,最後是電源。 風扇速度由每個節點控制,允許節流配置文件或將風扇鎖定到全速。 對於我們正在進行的實驗室使用,我們在所有測試中將風扇保持在 100%。 在同時提供電源和冷卻的開放式計算機架中,風扇可以從機箱中移除,以便機架為 GridStreams 機箱提供冷卻。 四個風扇中的每一個都可以現場更換,以滿足長期維護需求。 要卸下發生故障的風扇單元,鬆開兩個帶有手緊旋鈕的固定螺釘,然後從機箱後部拉出該單元。 每個風扇都有一個快速釋放電源連接,因此在移除或插入新的冷卻風扇時無需弄亂電線。
在我們的平均實驗室溫度為 25.8C 的測試中,每個節點空閒時 CPU 溫度為 42C/45C(前/後),然後在負載下增加到 68C/90C。 讓實驗室預熱到 EchoStreams GridStreams 的工作溫度上限,我們在 47C/51C 空閒和 74C/90C 負載下測量每個節點,環境機架溫度為 31C。
電力
GridStreams 可以通過 100-240V 電源或配備低壓機架電源中心的開放式計算數據中心的普通 12VDC 供電。 我們的系統具有四個高效 400 瓦 100-240v 電源,這些電源在節點之間是非冗餘的。 這意味著每個節點都有自己的電源連接,如果一個電源出現故障,則為該特定節點供電的電源就會關閉。 選擇更高級別的效率或電源冗餘的客戶可以轉向支持多個 GridStreams 服務器的 EchoStreams 12VDC 機架電源中心之一。 RPC 提供自動縮放的內部 N+1 電源節點,可適應需求、加電或斷電以保持系統負載處於效率最大化的狀態。
在我們對使用單個 8GB DDR3 RDIMM、兩個 Intel Xeon E5-2640 CPU 和 Mellanox ConnectX-3 InfiniBand NIC 配置的節點進行的測試中,我們測得空閒功耗為 98 瓦,在滿 CPU 負載下增加到 232 瓦 伊頓高級 ePDU. 閒置時功率因數為 0.93,在負載下增加到 0.97。
結論
EchoStreams GridStreams 四節點 2U 計算平台在關鍵時刻加入 StorageReview 實驗室,因為我們擴展到更大規模的基於應用程序的測試,這需要越來越多的通用計算解決方案來推動最佳案例應用程序性能。 當然,GridStreams 不僅解決了性能問題,還解決了開放計算聯盟成員的密度和專業要求。 外殼和刀片的可維護性以及前置 I/O 端口使 GridStreams 成為雲服務提供商的理想解決方案,他們幾乎沒有從傳統服務器提供商那裡獲得的選擇。 此外,EchoStreams 計劃繼續發展該平台,最終移除風扇和電源,它們將合併到智能機架中,在大型數據中心處理這些任務。
我們的目標沒有大型數據中心那麼雄心勃勃,但在更適度的規模上,能夠模擬真實世界的計算和存儲環境對於正確的測試和評估至關重要。 為此,GridStreams 解決方案成為實驗室的寶貴部分,因為我們繼續擴大與存儲和整個生態系統相關的測試範圍。