NVIDIA har introducerat Omniverse-bibliotek, en uppsättning programvarukomponenter utformade för att integrera fysiska AI-funktioner i befintliga 3D-applikationer och förbereda innehåll för simulering. Biblioteken är avsedda att hjälpa utvecklare, tekniker och ingenjörsteam att bygga arbetsflöden som inspekterar scener, validerar tillgångar, modellerar fysiskt beteende och genererar sensordata för robotteknik, fabriksautomation och utveckling av autonoma system.
Fysiska AI-system kräver vanligtvis träning och validering i simulerade miljöer innan driftsättning. Den processen är beroende av mer än fotorealistiskt 3D-innehåll. Simuleringsresurser måste inkludera korrekt geometri, material, skala, etiketter, sensordefinitioner och fysiska egenskaper som massa, friktion och kollisionsbeteende. NVIDIA positionerar de nya biblioteken som byggstenar för AI-agenter som kan hjälpa till med dessa förberedelse- och valideringsuppgifter inom etablerade design- och innehållsskapande miljöer.
Den första utgåvan inkluderar ovrtx, ovphysx och CAD-to-SimReady-färdigheter. Komponenterna finns tillgängliga på GitHub, tillsammans med en Blender-integrationsritning som visar hur utvecklare kan lägga till agentklara simuleringsfunktioner till en befintlig 3D-applikation.
ovrtx tillhandahåller NVIDIA RTX-baserad sensorsimulering, vilket gör det möjligt för applikationer att generera virtuella kameror, lidar, radar och andra sensorutgångar från 3D-scener. Denna funktion gör det möjligt för utvecklare att bedöma hur ett fysiskt AI-system skulle uppfatta en simulerad miljö innan de testar hårdvara i fält.
Ovphysx-biblioteket tillför GPU-accelererade fysikfunktioner till simuleringsarbetsflöden. Det stöder modellering av kollisioner, massa, friktion, rörelse och andra fysiska interaktioner som krävs för att utvärdera robotbeteende och industriella processer i en virtuell miljö.
CAD-till-SimReady-färdigheter fokuserar på att konvertera CAD-data till OpenUSD-baserade SimReady-resurser. Arbetsflödet är avsett att bevara tekniskt innehåll samtidigt som det lägger till de struktur- och simuleringsattribut som behövs för fysisk AI-utveckling, inklusive robotik och testning av autonoma system.
Tidiga programvaruintegrationer
SideFX och PTC är bland de programvaruleverantörer som arbetar med Omniverse-biblioteken. SideFX utvärderar OpenUSD-arbetsflöden med ovrtx och ovphysx som en del av sin Houdini-miljö för processuell 3D-innehållsskapande. Arbetet syftar till att möjliggöra agentassisterade arbetsflöden för att generera procedurellt innehåll, utvärdera fysik och förbereda scener för simulering, samtidigt som tekniska konstnärer behåller kontrollen över den underliggande kreativa processen.
PTC integrerar OpenUSD och ovrtx i sin Onshape CAD- och produktdatahanteringsplattform. Integrationen är avsedd att koppla samman molnbaserade designarbetsflöden med fysisk simulering, vilket gör det möjligt för ingenjörsteam att överföra produktinnehåll över CAD-, PDM-, samarbets-, validerings- och simuleringsprocesser utan att upprepade gånger behöva omarbeta resurser.
På SIGGRAPH 2026 demonstrerade NVIDIA ett SimReady Blender-arbetsflöde byggt med Omniverse-biblioteken och NVIDIA Nemotron Ultras öppna modell. Referensimplementeringen visar hur utvecklare kan introducera RTX-sensorsimulering, fysik och validering i Blender-baserade arbetsflöden samtidigt som de behåller skaparkontrollen. NVIDIA har gjort Blender-ritningen offentligt tillgänglig.
Företaget uppgav att dessa arbetsflöden kan köras lokalt över system som sträcker sig från kompakta NVIDIA RTX Spark-enheter till NVIDIA GB300-drivna DGX Station-system. NVIDIA förväntar sig att RTX Spark-system från flera OEM-partners kommer att bli tillgängliga i höst, medan DGX Station-system finns tillgängliga via flera systemleverantörer.
Startups bygger agentassisterade tillgångspipelines
Flera startups använder också Omniverse-komponenter för arbetsflöden för förberedelse av resurser och scen. Palatial använder CAD-till-SimReady-färdigheter för att automatisera skapandet och valideringen av SimReady-resurser från CAD-filer i stor skala. Lightwheel använder NVIDIA Content Agents och OpenUSD i sin SimReadyGen-teknik för att generera fysiskt noggranna simuleringstillgångar från textprompter.
ForgeCAD och MoonlakeAI utvecklar agentdrivna 3D-arbetsflöden baserade på Omniverse-funktioner. Deras arbete fokuserar på att hjälpa till med skapandet, förbättringen och förberedelsen av resurser för simuleringar som används för att träna och validera verkliga AI-system.
Amazon