Meta ontwerpt, bouwt en implementeert zijn hardware al meer dan 14 jaar in enkele van de grootste datacenters. In 2009, na een snelle groei, werden technici opgeroepen om hun infrastructuur te heroverwegen om de enorme interne groei van gegevens, mensen en middelen te ondersteunen toen Facebook-ingenieurs begonnen aan de reis om een energie-efficiënt datacenter te ontwerpen met software, servers, hardware, koeling , en macht. Ze hebben nu het Grand Canyon Storage System toegevoegd aan OCP als de volgende standaard voor bulkopslag.
Meta ontwerpt, bouwt en implementeert zijn hardware al meer dan 14 jaar in enkele van de grootste datacenters. In 2009, na een snelle groei, werden technici opgeroepen om hun infrastructuur te heroverwegen om de enorme interne groei van gegevens, mensen en middelen te ondersteunen toen Facebook-ingenieurs begonnen aan de reis om een energie-efficiënt datacenter te ontwerpen met software, servers, hardware, koeling , en macht. Ze hebben nu het Grand Canyon Storage System toegevoegd aan OCP als de volgende standaard voor bulkopslag.
De nieuwe faciliteit was 38 procent energiezuiniger om te bouwen en 24 procent goedkoper in gebruik dan de vorige faciliteiten van het bedrijf. Facebook besloot zijn succes te delen met de wereldwijde technische gemeenschap. Daarom werd in 2011 de Open Compute Project Foundation (OCP) opgericht om het innovatietempo voor netwerkapparatuur te verhogen. Alles, van servers voor algemeen gebruik, GPU-servers, opslagapparaten en rackontwerpen, is voortgekomen uit het OCP-samenwerkingsmodel en wordt buiten het datacenter toegepast, wat helpt om de telecomindustrie en edge-infrastructuur vooruit te helpen.
Het was dus niet meer dan passend dat Meta de OCP Global Summit gebruikte om de aanwezigen door de nieuwste opslagserver en JBOD genaamd Grand Canyon te leiden, en een nieuwe single-socket-server genaamd Barton Springs. Het ontwerp voor Grand Canyon kwam voort uit de vraag om een betere en snellere opslagserver te bouwen.
De motivatie achter de nieuwe server was gebaseerd op het volgende:
- Hogere CPU-prestaties per slot
- Verbeterd chassis om harde schijven te ondersteunen (tot 2025-2026-achtig tijdsbestek)
- Energie-efficiëntie
- Flexibiliteit behouden (ORv3, modulaire CPU-kaart)
- Ontwerp met componenten met een langere levensduur
Het ontwerp voor de Grand Canyon verhoogde de modulariteit om de upgrademogelijkheden en de levensduur van het nieuwe chassis te verlengen.
| Bestanddeel | Beschrijving |
| CPU | Intel Xeon "Cooper Lake" SOC |
| Boot Drive | M.2 Solid State (2280 vormfactor Hyperscale NVMe Boot SSD-specificatie) |
| DIMM | 1 DDR4 DIMM per kanaal bij 4 kanalen tot 3200MT/s |
| PCH | Intel PCH-chipset |
De nieuwe opslagserver bestaat uit twee opslagknooppunten die 36 x 3.5″ HDD's in één lade ondersteunen. Grand Canyon gebruikt de Barton Springs 1-socket server met een aantal indrukwekkende specificaties. In het nieuwe chassis is extra flexibiliteit ingebouwd, waardoor het systeem in drie configuraties kan worden gebouwd.
De eerste configuratieoptie is een stand-alone dual-storageserver met twee rekenknooppunten en 72 HDD's waar alle schijven continu aan staan voor snellere gegevenstoegang.
De tweede configuratie is een enkele opslagserver met een enkel rekenknooppunt dat ook als hoofdknooppunt kan worden gebruikt. Deze configuratie maakt verbinding met twee van de JBOD-chassis, de derde configuratie en heeft geen rekenknooppunt, en ondersteunt maximaal 216 HDD's.
Elke configuratie heeft verschillende populaties voor de modules in het systeem, zoals geïllustreerd in de exploded view hierboven. Een belangrijk element van dit ontwerp is hoe gemakkelijk het is om toegang te krijgen tot alle componenten vanaf de voorkant of de bovenkant van het chassis.
Grand Canyon versus Bryce Canyon (vorige generatie)
| Bryce Canyon | Grand Canyon | |
| Berekenen | 16 Core | 26 Core |
| SpecIntRate | 1 | 1.87 (turbo ingeschakeld) |
| DRAM-capaciteit, BW per CPU | 2x 32GB DDR4, 33GB/sec | 4x 16GB DDR4, 93GB/sec |
| Opstart-SSD per computer | 256 GB | 256 GB |
| Gegevens-SSD per computer | 2x2TB m.2 | 2x2TB E1.S 9.5 mm (uitbreidbare capaciteit |
| Aandrijvingen per chassis, aandrijvingen per computer | 72, 36 | 72, 36 |
| NIC | 50 Gbps, enkele host, OCP2.0 | 50 Gbps, enkele host, OCP 3.0 (uitbreidbaar tot 100 Gbps) |
Grand Canyon-opslagsysteem Structurele ontwerpverbeteringen
Met het aantal HDD's in dit chassis en het potentieel voor trillingen van de ventilatoren, heeft Meta verbeteringen aangebracht in het gebruik van trillingsdempende functies, zowel structureel als akoestisch, om een hoge HDD-capaciteit mogelijk te maken en te voorkomen dat ventilatortrillingen doordringen naar de behuizing.
Meta-ingenieurs gebruikten een surrogaat om trillingen te meten en namen contact op met leveranciers van harde schijven om de voordelen te vergelijken van de trillingsdemping die werd gebruikt bij het ontwerpen van het Grand Canyon-chassis.
Het ventilatorsysteem is aangepast met een jaloezie die sluit als een ventilator wordt uitgeschakeld, waardoor verlies van luchtstroom door het systeem wordt voorkomen. Dit zorgt voor een goede koeling door het hele chassis, zelfs als de ventilator uitvalt.
Het Grand Canyon-systeem maakt gebruik van de nieuwste IOC en Expanders van Broadcom, waaronder SAS Gen4-mogelijkheden, is interoperabel met SAS- en SATA-HDD's en biedt hardware- en firmware-compatibiliteit voor opdrachtduurlimieten op SAS/SATA-HDD's, evenals HDD's met dubbele actuator.
ondersteunende documentatie
Voor informatie over surrogaat-HDD's die zijn gebouwd voor Grand Canyon-karakterisering, verwijzen naar dit gesprek.
Voor informatie over surrogaat-HDD's, verbeteringen en standaardisatie kunt u lid worden van de OCP HDD-dynamiek werk stroom.
Voor meer informatie over functies die van belang zijn voor Meta, bekijk de 'HDD-functies voor de toekomstige sessie hier.
De specificatie kan worden bekeken op de GitHub-opslagplaats (OpenBMC).
De Grand Canyon-systemen zijn verkrijgbaar bij Wiwynn, genaamd SV/ST7000G4 in hun productgids.
Neem contact op met StorageReview
Nieuwsbrief | YouTube | Podcast iTunes/Spotify | Instagram | Twitter | TikTok | RSS Feed
