Meta entwirft, baut und implementiert seine Hardware seit über 14 Jahren in einigen der größten Rechenzentren. Nach dem rasanten Wachstum im Jahr 2009 wurden Ingenieure aufgefordert, ihre Infrastruktur zu überdenken, um das massive interne Wachstum an Daten, Menschen und Ressourcen zu unterstützen, als Facebook-Ingenieure sich auf den Weg machten, ein energieeffizientes Rechenzentrum mit Software, Servern, Hardware und Kühlung zu entwerfen , und Macht. Sie haben nun das Grand Canyon Storage System als nächsten Standard für die Massenspeicherung zu OCP beigetragen.
Meta entwirft, baut und implementiert seine Hardware seit über 14 Jahren in einigen der größten Rechenzentren. Nach dem rasanten Wachstum im Jahr 2009 wurden Ingenieure aufgefordert, ihre Infrastruktur zu überdenken, um das massive interne Wachstum an Daten, Menschen und Ressourcen zu unterstützen, als Facebook-Ingenieure sich auf den Weg machten, ein energieeffizientes Rechenzentrum mit Software, Servern, Hardware und Kühlung zu entwerfen , und Macht. Sie haben nun das Grand Canyon Storage System als nächsten Standard für die Massenspeicherung zu OCP beigetragen.
Der Bau der neuen Anlage war um 38 Prozent energieeffizienter und der Betrieb um 24 Prozent kostengünstiger als die vorherigen Anlagen des Unternehmens. Facebook hat beschlossen, seinen Erfolg mit der globalen Ingenieursgemeinschaft zu teilen. Deshalb wurde 2011 die Open Compute Project Foundation (OCP) ins Leben gerufen, um das Innovationstempo bei Netzwerkgeräten zu erhöhen. Alles, von Allzweckservern über GPU-Server bis hin zu Speichergeräten und Rack-Designs, ist das Ergebnis des OCP-Kooperationsmodells und wird über das Rechenzentrum hinaus angewendet, um die Telekommunikationsbranche und die Edge-Infrastruktur voranzutreiben.
Daher war es nur passend, dass Meta den OCP Global Summit nutzte, um den Teilnehmern den neuesten Speicherserver und JBOD namens Grand Canyon sowie einen neuen Single-Socket-Server namens Barton Springs vorzustellen. Der Entwurf für Grand Canyon entstand aus der Forderung, einen besseren und schnelleren Speicherserver zu bauen.
Die Motivation hinter dem neuen Server basierte auf Folgendem:
- Höhere CPU-Leistung pro Steckplatz
- Verbessertes Gehäuse zur Unterstützung dichter Laufwerke (bis 2025–2026)
- Energie-Effizienz
- Behalten Sie die Flexibilität bei (ORv3, modulare CPU-Karte)
- Design mit langlebigeren Komponenten
Das Design für Grand Canyon erhöhte die Modularität, um die Aufrüstbarkeit und die Lebensdauer des neuen Chassis zu verlängern.
Komponente | Beschreibung |
CPU | Intel Xeon „Cooper Lake“ SOC |
Bootlaufwerk | M.2 Solid State (Formfaktor 2280). Hyperscale NVMe Boot SSD-Spezifikation) |
DIMM | 1 DDR4 DIMM pro Kanal bei 4 Kanälen bis zu 3200 MT/s |
PCH | Intel PCH-Chipsatz |
Der neue Speicherserver besteht aus zwei Speicherknoten, die 36 x 3.5-Zoll-Festplatten in einer einzigen Schublade unterstützen. Grand Canyon verwendet den Barton Springs 1-Sockel-Server mit einigen beeindruckenden Spezifikationen. Das neue Gehäuse bietet zusätzliche Flexibilität, sodass das System in drei Konfigurationen aufgebaut werden kann.
Die erste Konfigurationsoption ist ein eigenständiger Dual-Storage-Server mit zwei Rechenknoten und 72 Festplatten, bei dem alle Laufwerke für einen schnelleren Datenzugriff ständig eingeschaltet sind.
Die zweite Konfiguration ist ein einzelner Speicherserver mit einem einzelnen Rechenknoten, der auch als Hauptknoten verwendet werden kann. Diese Konfiguration stellt eine Verbindung zu zwei JBOD-Gehäusen her. Dabei handelt es sich um die dritte Konfiguration, die über keinen Rechenknoten verfügt und bis zu 216 Festplatten unterstützt.
Jede Konfiguration weist unterschiedliche Populationen für die Module im System auf, wie in der Explosionsansicht oben dargestellt. Ein Schlüsselelement dieses Designs ist der einfache Zugriff auf alle Komponenten von der Vorderseite oder der Oberseite des Gehäuses.
Grand Canyon vs. Bryce Canyon (vorherige Generation)
Bryce Canyon | Grand Canyon | |
Berechnen | 16-Kern | 26-Kern |
SpecIntRate | 1 | 1.87 (Turbo aktiviert) |
DRAM-Kapazität, BW pro CPU | 2x 32GB DDR4, 33GB/s | 4x 16GB DDR4, 93GB/s |
Booten Sie die SSD pro Rechenzeit | 256 GB | 256 GB |
Daten-SSD pro Rechenleistung | 2x2TB m.2 | 2x2 TB E1.S 9.5 mm (erweiterbare Kapazität |
Laufwerke pro Gehäuse, Laufwerke pro Rechenleistung | 72, 36 | 72, 36 |
NIC | 50 Gbit/s, Einzelhost, OCP2.0 | 50 Gbit/s, Einzelhost, OCP 3.0 (aufrüstbar auf 100 Gbit/s) |
Strukturelle Designverbesserungen des Grand Canyon-Speichersystems
Angesichts der Anzahl der Festplatten in diesem Gehäuse und der Möglichkeit von Vibrationen durch die Lüfter hat Meta Verbesserungen bei der Verwendung von Vibrationsdämpfungsfunktionen vorgenommen, sowohl struktureller als auch akustischer Art, um eine dichte Festplattenkapazitätsaufnahme zu ermöglichen und zu verhindern, dass Lüftervibrationen auf das Gehäuse übertragen werden.
Meta-Ingenieure verwendeten ein Ersatzsignal zur Messung der Vibrationen und wandten sich an Festplattenhersteller, um die Vorteile der Vibrationsdämpfung zu vergleichen, die bei der Entwicklung des Grand Canyon-Gehäuses zum Einsatz kam.
Das Lüftersystem wurde so modifiziert, dass es eine Jalousie enthält, die sich schließt, wenn ein Lüfter abschaltet, und so einen Verlust des Luftstroms durch das System verhindert. Dies gewährleistet eine ordnungsgemäße Kühlung im gesamten Gehäuse, selbst im Falle eines Lüfterausfalls.
Das Grand Canyon-System nutzt die neuesten IOC und Expander von Broadcom, die SAS Gen4-Funktionen umfassen, mit SAS- und SATA-Festplatten kompatibel sind und Hardware- und Firmware-Kompatibilität für Befehlsdauerbegrenzungen auf SAS/SATA-Festplatten bieten Festplatten mit zwei Aktuatoren.
Unterstützende Dokumentation
Informationen zu Ersatz-HDDs für die Grand-Canyon-Charakterisierung finden Sie unter siehe diesen Vortrag.
Weitere Informationen zu Ersatz-HDDs, Verbesserungen und Standardisierung finden Sie unter OCP HDD-Dynamik Arbeitsablauf.
Weitere Informationen zu Funktionen, die für Meta von Interesse sind, finden Sie im Abschnitt „HDD-Funktionen für die zukünftige Sitzung hier.
Die Spezifikation kann auf der eingesehen werden GitHub-Repository (OpenBMC).
Die Grand Canyon-Systeme sind bei Wiwynn erhältlich und werden im Produkthandbuch als SV/ST7000G4 bezeichnet.
Beteiligen Sie sich an StorageReview
Newsletter | YouTube | Podcast iTunes/Spotify | Instagram | Twitter | TikTok | RSS Feed