NVIDIA hat die Omniverse-Bibliotheken vorgestellt, eine Reihe von Softwarekomponenten, die physikalische KI-Funktionen in bestehende 3D-Anwendungen integrieren und Inhalte für Simulationen vorbereiten. Die Bibliotheken sollen Entwicklern, technischen Künstlern und Ingenieurteams helfen, Workflows zu erstellen, die Szenen untersuchen, Assets validieren, physikalisches Verhalten modellieren und Sensordaten für Robotik, Fabrikautomation und die Entwicklung autonomer Systeme generieren.
Physikalische KI-Systeme müssen vor dem Einsatz typischerweise in simulierten Umgebungen trainiert und validiert werden. Dieser Prozess erfordert mehr als nur fotorealistische 3D-Inhalte. Simulationsobjekte müssen korrekte Geometrie, Materialien, Skalierung, Beschriftungen, Sensordefinitionen und physikalische Eigenschaften wie Masse, Reibung und Kollisionsverhalten aufweisen. NVIDIA positioniert die neuen Bibliotheken als Bausteine für KI-Agenten, die diese Vorbereitungs- und Validierungsaufgaben in etablierten Design- und Content-Erstellungsumgebungen unterstützen können.
Die erste Version umfasst die Skills ovrtx, ovphysx und CAD-to-SimReady. Die Komponenten sind auf GitHub verfügbar, zusammen mit einer Blender-Integrationsanleitung, die Entwicklern zeigt, wie sie agentenfähige Simulationsfunktionen in bestehende 3D-Anwendungen integrieren können.
ovrtx bietet eine auf NVIDIA RTX basierende Sensorsimulation, mit der Anwendungen virtuelle Kamera-, Lidar-, Radar- und andere Sensorausgaben aus 3D-Szenen generieren können. Diese Funktion ermöglicht es Entwicklern, zu beurteilen, wie ein physikalisches KI-System eine simulierte Umgebung wahrnehmen würde, bevor Hardware im praktischen Einsatz getestet wird.
Die ovphysx-Bibliothek erweitert Simulationsabläufe um GPU-beschleunigte Physikfunktionen. Sie unterstützt die Modellierung von Kollisionen, Masse, Reibung, Bewegung und anderen physikalischen Interaktionen, die zur Bewertung des Verhaltens von Robotern und industriellen Prozessen in einer virtuellen Umgebung erforderlich sind.
Die CAD-zu-SimReady-Kompetenzen konzentrieren sich auf die Konvertierung von CAD-Daten in OpenUSD-basierte SimReady-Assets. Der Workflow zielt darauf ab, die technischen Inhalte zu erhalten und gleichzeitig die für die Entwicklung physikalischer KI, einschließlich Robotik und Tests autonomer Systeme, erforderlichen Struktur- und Simulationsattribute hinzuzufügen.
Frühe Softwareintegrationen
SideFX und PTC gehören zu den Softwareanbietern, die mit den Omniverse-Bibliotheken arbeiten. SideFX evaluiert OpenUSD-Workflows mit ovrtx und ovphysx im Rahmen seiner Houdini-Umgebung zur prozeduralen 3D-Inhaltserstellung. Ziel ist es, agentengestützte Workflows für die prozedurale Inhaltsgenerierung, die Physikberechnung und die Szenenvorbereitung für Simulationen zu ermöglichen und gleichzeitig den technischen Künstlern die Kontrolle über den zugrundeliegenden kreativen Prozess zu erhalten.
PTC integriert OpenUSD und ovrtx in seine Onshape CAD- und Produktdatenmanagement-Plattform. Ziel der Integration ist die Verbindung cloudnativer Design-Workflows mit physikalischen Simulationen. Dadurch können Entwicklungsteams Produktinhalte nahtlos durch CAD-, PDM-, Kollaborations-, Validierungs- und Simulationsprozesse führen, ohne Assets wiederholt bearbeiten zu müssen.
Auf der SIGGRAPH 2026 demonstrierte NVIDIA einen SimReady-Workflow für Blender, der auf den Omniverse-Bibliotheken und dem offenen Modell des NVIDIA Nemotron Ultra basiert. Die Referenzimplementierung zeigt, wie Entwickler RTX-Sensorsimulation, Physik und Validierung in Blender-basierte Workflows integrieren können, ohne die volle Kontrolle zu verlieren. NVIDIA hat den Blender-Blueprint öffentlich zugänglich gemacht.
Das Unternehmen gab an, dass diese Workflows lokal auf Systemen von kompakten NVIDIA RTX Spark-Geräten bis hin zu NVIDIA GB300-basierten DGX Station-Systemen ausgeführt werden können. NVIDIA erwartet, dass RTX Spark-Systeme von verschiedenen OEM-Partnern im Herbst verfügbar sein werden, während DGX Station-Systeme über mehrere Systemanbieter erhältlich sind.
Startups entwickeln agentengestützte Asset-Pipelines
Mehrere Startups setzen Omniverse-Komponenten auch in Workflows zur Asset- und Szenenvorbereitung ein. Palatial nutzt CAD-zu-SimReady-Funktionen, um die Erstellung und Validierung von SimReady-Assets aus CAD-Dateien in großem Umfang zu automatisieren. Lightwheel verwendet NVIDIA Content Agents und OpenUSD in seiner SimReadyGen-Technologie, um physikalisch korrekte Simulations-Assets aus Texteingaben zu generieren.
ForgeCAD und MoonlakeAI entwickeln agentenbasierte 3D-Workflows auf Basis der Omniverse-Funktionen. Ihr Schwerpunkt liegt auf der Unterstützung bei der Erstellung, Verbesserung und Aufbereitung von Assets für Simulationen, die zum Trainieren und Validieren realer KI-Systeme eingesetzt werden.
Amazon