MinIO hat ExaPOD vorgestellt, eine modulare Referenzarchitektur für die Entwicklung und Verwaltung von Exascale-KI-Infrastruktur. Sie entstand in Zusammenarbeit mit Intel, Solidigm und Supermicro. ExaPOD basiert auf MinIO AIStor, dem Exascale-Datenspeichersystem von MinIO für KI-Unternehmen. Es erweitert das bestehende DataPOD-Konzept von 100-Petabyte-Einheiten auf Ein-Exabyte-Blöcke.
ExaPOD dient als wiederverwendbare Blaupause für Unternehmen und neue Cloud-Anbieter. Es unterstützt die Bereitstellung nachhaltiger, vorhersagbarer und kosteneffizienter KI-Leistung in extremem Umfang auf der von ihnen kontrollierten Infrastruktur.
Die eigentliche Herausforderung in der KI lösen
Mit der zunehmenden Verbreitung von KI-Agenten, Langzeitkontextmodellen und multimodalen Pipelines steigen die Datenmengen von Petabytes auf mehrere Exabytes. In vielen Fällen ist die primäre Einschränkung nicht die Verfügbarkeit von GPUs, sondern die Datenübertragung. GPUs bleiben oft ungenutzt, nicht etwa aufgrund mangelnder Rechenleistung, sondern weil Speicher und Datenpfad die Daten nicht schnell genug bereitstellen können.
ExaPOD wurde speziell entwickelt, um diesen Engpass zu beseitigen. Es reduziert und stabilisiert die Latenz im Exascale-Bereich und gewährleistet so einen breiten und konsistenten Datenpfad. MinIO nutzt ExaPOD, um eine Speicher- und Datenschicht zu schaffen, die einen hohen Durchsatz und geringen Latenzzugriff auf Trainings-, Inferenz- und Abrufdatensätze ermöglicht. Dadurch erhalten KI-Workloads kontinuierliche Datenströme, anstatt auf E/A warten zu müssen.
Neben der Leistungsfähigkeit erfüllt ExaPOD auch praktische Anforderungen an KI im großen Maßstab:
- Vorhersagbare Gesamtbetriebskosten: Das Referenzdesign verwendet allgemein anerkannte, branchenübliche Komponenten und softwaredefinierten Speicher, was eine vorhersehbare Kostenmodellierung bei steigender Kapazität ermöglicht.
- Souveräne, lokale Bereitstellung: ExaPOD ist für den Betrieb auf Hardware unter der Kontrolle des Unternehmens oder des Neocloud-Anbieters konzipiert. Dies minimiert unerwartete Kosten, vermeidet Cloud-Lock-in und vereinfacht die Einhaltung von Regeln zur Datenresidenz und -souveränität.
Mit anderen Worten: Bei ExaPOD geht es um mehr als nur um Geschwindigkeit; es macht die KI-Dateninfrastruktur im Exabyte-Bereich besser handhabbar, vorhersehbarer und nachhaltiger.
Datenarchitektur, nicht nur Modelle, im Zentrum der KI
AB Periasamy, Mitgründer und Co-CEO von MinIO, sieht die moderne KI-Entwicklung eher als Herausforderung für die Dateninfrastruktur denn als reines Modell- oder Hardwareproblem. Er ist überzeugt, dass die Unternehmen, die im Bereich KI erfolgreich sein werden, diejenigen sind, die die Speicherung, den Transport und den Zugriff auf Daten in großem Umfang überdenken und dabei gleichzeitig eine Kosteneffizienz wie bei Hyperscalern beibehalten.
Vor diesem Hintergrund bietet ExaPOD Unternehmen eine klare, modulare Möglichkeit, KI-fähige Infrastruktur aufzubauen, ohne dabei auf Kontrolle, Flexibilität oder Kostentransparenz zu verzichten. Anstatt auf undurchsichtige Einheitslösungen zu setzen, bietet ExaPOD ein Muster identischer, wiederholbarer Bausteine, die von einzelnen Racks bis hin zu kompletten Rechenzentren skalierbar sind und dabei Leistung und Zuverlässigkeit gewährleisten.
Partnerhardware
Supermicro SYS-212H-TN 2U, 24 NVMe-Einschübe: Das SYS-212H-TN bietet eine kompakte und dennoch ausgewogene Lösung für Rack-Installationen. Seine 24 NVMe-Einschübe im 2U-Format maximieren die Speicherdichte pro Rack, ohne Kompromisse bei Luftzirkulation, Energieeffizienz oder Wartungsfreundlichkeit einzugehen. Zudem unterstützt es Flüssigkeitskühlung und hocheffiziente Stromversorgung.
Intel Xeon 6781P (80 Kerne, 136 PCIe Gen5 Lanes): Der Xeon 6781P wurde aufgrund seiner Fähigkeit ausgewählt, sowohl hochdichte NVMe- als auch 400/800-GbE-Netzwerke gleichzeitig voll auszulasten. Mit 136 PCIe Gen5 Lanes unterstützt er volle Parallelität über 24 NVMe-Laufwerke und zwei 400-GbE-Netzwerkkarten ohne Überbelegung.
Solidigm D5-P5336 SSD (122.88 TB QLC NVMe): Mit 122.88 TB Speicherkapazität pro Laufwerk bietet die Solidigm D5-P5336 eine extreme Speicherdichte und ermöglicht es ExaPOD, eine nutzbare Kapazität von mehreren Exabyte auf kleinstem und effizientestem Rechenzentrums-Flächenniveau der Branche zu erreichen.
Ein Schlüsselaspekt von ExaPOD ist der Fokus auf Dichte und Energieeffizienz – entscheidende Faktoren bei Multi-Petabyte- und Exabyte-Größenordnungen.
ExaPOD bietet:
- 36 PiB nutzbare Kapazität pro Rack-Einheit in einem kompakten All-in-One-System reduzieren den Platzbedarf für KI-Dateninfrastruktur erheblich. Diese Dichte ist essenziell für Einrichtungen mit begrenzter Stromversorgung und begrenztem Platzangebot.
- Im Durchschnitt 900 W pro PiB nutzbarer Kapazität, inklusive Kühlung. Durch die Reduzierung des Leistungsbedarfs der Datenschicht stellt ExaPOD mehr Leistungskapazität des Rechenzentrums für GPUs und Beschleuniger bereit.
Sehen Sie es auf der SC25.
MinIO wird ExaPOD auf der SuperComputing '25 in St. Louis vom 16. bis 21. November präsentieren.
Amazon