NVIDIA a lancé les bibliothèques Omniverse, un ensemble de composants logiciels conçus pour intégrer des capacités d'IA physique aux applications 3D existantes et préparer le contenu pour la simulation. Ces bibliothèques visent à aider les développeurs, les artistes techniques et les équipes d'ingénierie à créer des flux de travail permettant d'inspecter les scènes, de valider les ressources, de modéliser les comportements physiques et de générer des données de capteurs pour la robotique, l'automatisation industrielle et le développement de systèmes autonomes.
Les systèmes d'IA physique nécessitent généralement un entraînement et une validation dans des environnements simulés avant leur déploiement. Ce processus ne se limite pas à un contenu 3D photoréaliste. Les ressources de simulation doivent inclure une géométrie, des matériaux, une échelle, des étiquettes, des définitions de capteurs et des propriétés physiques correctes, telles que la masse, le frottement et le comportement en cas de collision. NVIDIA présente ses nouvelles bibliothèques comme des briques de base pour les agents d'IA, capables d'assister dans ces tâches de préparation et de validation au sein d'environnements de conception et de création de contenu établis.
La première version inclut ovrtx, ovphysx et des compétences CAD-to-SimReady. Les composants sont disponibles sur GitHub, ainsi qu'un modèle d'intégration Blender qui montre comment les développeurs peuvent ajouter des fonctionnalités de simulation compatibles avec les agents à une application 3D existante.
ovrtx propose une simulation de capteurs basée sur NVIDIA RTX, permettant aux applications de générer des données virtuelles de caméra, lidar, radar et autres capteurs à partir de scènes 3D. Cette fonctionnalité permet aux développeurs d'évaluer la perception d'un environnement simulé par un système d'IA physique avant de tester le matériel sur le terrain.
La bibliothèque ovphysx apporte des capacités d'accélération physique par GPU aux flux de travail de simulation. Elle prend en charge la modélisation des collisions, de la masse, du frottement, du mouvement et d'autres interactions physiques nécessaires à l'évaluation du comportement des robots et des processus industriels dans un environnement virtuel.
Les compétences en conversion CAO vers SimReady consistent à convertir des données CAO en ressources SimReady basées sur OpenUSD. Ce processus vise à préserver le contenu technique tout en ajoutant la structure et les attributs de simulation nécessaires au développement de l'IA physique, notamment pour la robotique et les tests de systèmes autonomes.
Intégrations logicielles précoces
SideFX et PTC figurent parmi les fournisseurs de logiciels qui utilisent les bibliothèques Omniverse. SideFX évalue les flux de travail OpenUSD avec ovrtx et ovphysx dans le cadre de son environnement de création de contenu 3D procédural Houdini. Ce projet vise à permettre des flux de travail assistés par agents pour la génération de contenu procédural, l'évaluation de la physique et la préparation des scènes pour la simulation, tout en laissant aux artistes techniques la maîtrise du processus créatif sous-jacent.
PTC intègre OpenUSD et ovrtx à sa plateforme de CAO et de gestion des données produits Onshape. Cette intégration vise à connecter les flux de travail de conception natifs du cloud à la simulation physique, permettant ainsi aux équipes d'ingénierie de transférer le contenu produit entre les processus de CAO, de gestion des données produits, de collaboration, de validation et de simulation sans avoir à retravailler constamment les ressources.
Lors du SIGGRAPH 2026, NVIDIA a présenté un flux de travail Blender compatible avec SimReady, basé sur les bibliothèques Omniverse et le modèle ouvert NVIDIA Nemotron Ultra. Cette implémentation de référence montre comment les développeurs peuvent intégrer la simulation, la physique et la validation des capteurs RTX dans leurs flux de travail Blender, tout en conservant la maîtrise de leur création. NVIDIA a rendu ce modèle Blender accessible au public.
L'entreprise a indiqué que ces flux de travail peuvent être exécutés localement sur des systèmes allant des appareils compacts NVIDIA RTX Spark aux systèmes DGX Station équipés de la carte graphique NVIDIA GB300. NVIDIA prévoit la disponibilité des systèmes RTX Spark de plusieurs partenaires OEM cet automne, tandis que les systèmes DGX Station seront disponibles auprès de nombreux fournisseurs.
Des startups créent des pipelines d'actifs assistés par des agents
Plusieurs startups appliquent également les composants d'Omniverse aux flux de travail de préparation des ressources et des scènes. Palatial utilise des compétences de conversion CAO-SimReady pour automatiser la création et la validation à grande échelle de ressources SimReady à partir de fichiers CAO. Lightwheel utilise NVIDIA Content Agents et OpenUSD dans sa technologie SimReadyGen pour générer des ressources de simulation physiquement précises à partir d'instructions textuelles.
ForgeCAD et MoonlakeAI développent des flux de travail 3D automatisés, basés sur les capacités d'Omniverse. Leurs travaux visent à faciliter la création, l'amélioration et la préparation des ressources pour les simulations utilisées dans l'entraînement et la validation de systèmes d'IA destinés au monde réel.
Amazon