Nvidia Omniverse ajoute l’IA générative et Unity avec la mise à jour

Nvidia a publié une nouvelle mise à jour de ses outils de simulation Omniverse qui permettra aux concepteurs d’exploiter l’IA générative et le moteur de jeu vidéo d’Unity.

La dernière version offre une efficacité améliorée et la convivialité, de nouveaux choix de versions et de nouveaux
adaptateurs Omniverse pour élargir l’écosystème. La société a fait cette déclaration lors d’un événement virtuel avant la convention commerciale technologique CES 2023 à Las Vegas.

Nvidia a également déclaré que les nouveaux clients utilisant Omniverse comprennent Dentsu, Mercedes Benz, Zaha Hadid Architects. Et Mercedes Benz s’apprête à développer un « jumeau numérique » d’une usine de voitures et de camions en Allemagne. Il développera une usine réelle basée sur la conception du jumeau numérique.

Avec Omniverse, tout le monde, des développeurs aux développeurs de jeux vidéo en passant par les entreprises, peut créer des simulations pour tester des choses qui sont bien mieux évaluées dans les mondes virtuels avant qu’elles sont sortis dans le monde réel, comme des voitures autonomes. Et Omniverse devient de plus en plus populaire à mesure que de nombreuses entreprises et des centaines d’innombrables créateurs l’adoptent. Il agrège également des technologies qui sont des tremplins vers le métaverse.

« Parmi les choses les plus étonnantes que nous ayons, il y a Nvidia Omniverse concernant les ordinateurs portables RTX », a déclaré Richard Kerris, vice-président de la plate-forme Omniverse, lors d’un point de presse. « Nous allons maintenant commencer à voir Omniverse Launcher de Nvidia, qui est le point de départ pour utiliser Omniverse, préinstallé sur ces tout nouveaux ordinateurs portables Nvidia Studio. Cela indique que nous allons avoir Omniverse disponible pour des millions de développeurs dans le monde. Et d’un simple clic sur un bouton, nous aurons la possibilité d’installer Omniverse et de tirer le meilleur parti de certaines des capacités que la plate-forme a encore plus de flux de travail existants. »

Alors que Nvidia possède Omniverse et utilise le logiciel pour aider à vendre ses unités de traitement graphique (puces GPU), il a adopté la norme open source Universal Scene Description (USD) (établie à l’origine par Pixar) pour permettre aux entreprises d’échanger des possessions 3D et de travailler sur pratiquement n’importe quel type du matériel. (Voir notre longue histoire sur l’USD ici). Nvidia a également lancé Omniverse Cloud, une méthode permettant d’accéder au logiciel depuis plus de 100 pays en utilisant du matériel courant.

Omniverse est une plate-forme de collaboration et de simulation. Il rassemble les flux de travail existants et permet aux développeurs, ingénieurs et créateurs de reproduire des environnements en temps réel avec des matériaux et une IA physiquement précis. Et un tas d’outils tiers sont désormais liés à Omniverse. Nvidia a montré une démo de six artistes de différentes parties du monde faisant équipe sur une scène 3D en temps réel.

L’Omniverse est un excellent outil pour développer des jumeaux numériques, et les jumeaux numériques finissent par être exceptionnellement populaires parmi des entreprises telles que Mercedes Benz. Cela leur permet d’idéaliser le style d’une usine dans une simulation virtuelle abordable mais précise. Une fois que l’usine du monde réel est développée sur la base de la conception, l’entreprise peut recueillir des informations du monde réel à partir des capteurs et les transmettre au jumeau numérique. Ce qui permet des améliorations supplémentaires dans le style, a déclaré Kerris.

Entreprise Omniverse

Avatars Omniverse de Nvidia.

La version actuelle de Nvidia Omniverse Business, disponible dès maintenant, apporte une efficacité accrue, des sauts générationnels dans le suivi des rayons et des cours RTX en temps réel, et des flux de travail structurés pour aider les équipes à construire
des pipelines 3D connectés, à développer et à exploiter des mondes 3D virtuels massifs et physiquement précis comme
jamais auparavant.

Les artistes, les concepteurs, les ingénieurs et les développeurs peuvent bénéficier de différentes améliorations dans les
cas d’utilisation typiques d’Omniverse, y compris la décomposition des informations 3D silos par agrégation, développement d’outils de pipeline 3D personnalisés et création de données 3D synthétiques.

La version consiste en un support pour les développements de développement au sein de la nouvelle architecture Nvidia Ada Lovelace
, composée de tiers RTX de dernière génération et DLSS 3, offrant jusqu’à 3 fois des gains d’efficacité lorsqu’ils sont alimentés par la dernière innovation GPU, comme les systèmes Nvidia RTX 6000 Ada Generation, Nvidia L40 et OVX.

La mise à niveau fournit également des fonctions et pouvoir des fonctionnalités telles que les nouveaux connecteurs Omniverse, les workflows en direct
basés sur les couches, l’expérience utilisateur améliorée et les alternatives de personnalisation, comprenant des ports multi-vues, des raccourcis
modifiables, des préréglages d’éclairage et bien plus encore.

Amélioration de la création 3D

Nvidia Omniverse obtient une mise à niveau pour les entreprises.

La communauté Omniverse s’agrandit, avec plus de capacités et d’outils qui permettent aux groupes d’augmenter les workflows 3D et d’atteindre de nouveaux niveaux de simulations en temps réel et physiquement précises. Les ajouts les plus récents
sont les suivants :

• Nouveaux connecteurs : les connecteurs omnivers permettent des flux de travail liés plus transparents entre diverses applications 3D. Les nouveaux Adobe Substance 3D Painter, Autodesk Alias, PTC Creo et les connecteurs Paraview Omniverse de Kitware sont désormais pris en charge sur Omniverse Business. Les utilisateurs peuvent également exporter rapidement des données développées dans NX Software à partir de l’application logicielle Siemens Digital Industries.
• Omniverse DeepSearch : désormais normalement proposé, ce service alimenté par l’IA permet aux groupes d’explorer intuitivement des bases de données 3D incroyablement volumineuses et non balisées en langage naturel ou à l’aide d’images de recommandation 2D. Cela ouvre une valeur significative dans les backlots numériques et les collections de possession autrefois peu maniables qui n’avaient pas la possibilité de rechercher.
• Omniverse Farm : une interface utilisateur entièrement restaurée offre une convivialité et des performances améliorées, ainsi qu’une assistance Kubernetes.
• Omniverse Cloud : de nouveaux conteneurs cloud pour Business Nucleus Server, Replicator, Farm et Isaac Sim pour AWS offrent aux entreprises plus de flexibilité pour relier et gérer des équipes dispersées dans le monde entier. Les contrôles de sécurité, d’identité et de gestion des accès d’AWS permettent aux groupes de conserver un contrôle total sur leurs données. Les conteneurs sont désormais disponibles sur Nvidia NGC.

Amélioration des composants de base pour la construction de mondes 3D

Les conceptions Omniverse peuvent utiliser des ensembles de données de voitures et de camions réels.

Omniverse Enterprise est développé pour une flexibilité et une évolutivité maximales. Cela suggère que les développeurs, les concepteurs, les chercheurs et les ingénieurs peuvent rapidement lier des outils, des propriétés et des tâches pour travailler ensemble dans une zone virtuelle partagée.

Omniverse Business apporte des mises à jour aux parties centrales de la plate-forme, y compris Omniverse Package SDK, la puissante boîte à outils pour développer des extensions, des applications, des microservices ou des plug-ins, simplifie désormais plus que jamais la création d’outils avancés et d’applications Omniverse avec de tout nouveaux modèles et workflows de conception.

Il inclut également Omniverse Develop, une application de recommandation pour créer des mondes à grande échelle basés sur l’USD. Et il inclut désormais Nvidia DLSS 3 et la prise en charge de plusieurs fenêtres, ce qui permet aux utilisateurs d’Omniverse Business de se connecter de manière fluide avec des scènes extrêmement volumineuses et complexes.

Et il dispose d’Omniverse View, une application de référence pour l’examen de la 3D scènes, et il a été structuré pour se concentrer uniquement sur l’expérience d’évaluation et d’approbation. De nouvelles capacités collaboratives, interactives en temps réel, y compris le balisage, l’annotation, la procédure et la navigation simple, rendent les discussions entre les parties prenantes beaucoup plus faciles et plus interactives que jamais.

Il y a Omniverse Nucleus, la base de données et le moteur de partenariat, se compose désormais de meilleurs outils de gestion informatique, tels qu’un contrôle de variation élargi pour gérer les points de contrôle atomiques sur le serveur. Le service de transfert de fichiers volumineux mis à niveau permet aux utilisateurs de déplacer des fichiers entre des serveurs, sur site ou dans le cloud pour bénéficier de flux de travail hybrides. Et de nouvelles instructions de déploiement en libre-service pour Enterprise Nucleus Server sur AWS sont désormais proposées, permettant aux consommateurs de publier et de gérer Nucleus dans le cloud.

Les clients plongent dans Omniverse Business

Les robots basés sur Isaac dans l’Omniverse -installation de stockage basée.

De nombreux clients dans le monde entier ont déjà expérimenté des flux de travail 3D améliorés avec Omniverse
Business.

Dentsu International, l’un des plus grands réseaux mondiaux d’agences de marketing et de publicité, recherche des solutions qui permettent un travail collaboratif et transparent, avec un référentiel central pour les projets terminés.

En plus d’améliorer pipelines existants avec Omniverse Enterprise, Dentsu souhaite intégrer
l’IA générative de Nvidia dans son pipeline de style 3D avec des kits de développement logiciel comme Omniverse ACE et
Audio2Face.

Zaha Hadid Architects (ZHA) est une entreprise de style architectural qui a développé quelques-uns des styles de construction les plus particuliers au monde. ZHA se concentre sur la création d’espaces culturels, commerciaux et résidentiels transformateurs grâce à des innovations avancées. Avec Omniverse Enterprise, le groupe peut accélérer et automatiser ses flux de travail, en plus de développer des outils personnalisés au sein de la plate-forme.

« Nous travaillons avec Nvidia pour inclure Omniverse en tant qu’installations connectives de notre technologie

Nvidia Omniverse Business est proposé par abonnement auprès de BOXX Technologies, Dell Technologies, Z
par HP et Lenovo, et des partenaires de distribution comprenant ASK, PNY et Leadtek. La plate-forme est optimisée pour
fonctionner sur des stations de travail mobiles et de bureau certifiées Nvidia et compatibles RTX, ainsi que sur des serveurs, avec une nouvelle
assistance pour les systèmes de génération Nvidia RTX Ada.

Omniverse Avatar Moteur cloud

Moteur cloud de l’avatar Nvidia Omniverse.

Les développeurs et les groupes qui créent des avatars et des assistants virtuels peuvent désormais s’inscrire pour s’inscrire au programme d’accès anticipé pour Nvidia Omniverse Avatar Cloud Engine (ACE), une suite de microservices d’IA natifs du cloud qui facilitent grandement la construction et la publication assistants virtuels intelligents et personnes numériques à grande échelle.

Omniverse ACE facilite l’avancement des avatars, fournissant les éléments de base de l’IA nécessaires pour ajouter de l’intelligence et de l’animation à n’importe quel avatar, construit sur pratiquement n’importe quel moteur et publié sur n’importe quel cloud. Ces assistants d’IA peuvent être conçus pour les organisations de tous les marchés, permettant aux organisations d’améliorer les flux de travail existants et d’ouvrir de toutes nouvelles opportunités de service.

ACE est l’une des nombreuses applications d’IA génératives qui aideront les développeurs à accélérer le développement de la 3D mondes et le métavers. Les membres qui rejoignent le programme auront accès aux versions préliminaires des microservices d’IA de NVIDIA, ainsi qu’aux outils et à la documentation nécessaires pour établir des flux de travail d’IA natifs dans le cloud pour les applications d’avatar interactif.

Donner vie aux avatars d’IA interactifs avec Omniverse ACE

Jensen Huang, PDG de Nvidia, présente Omniverse Avatar.

Les méthodes de développement d’avatars nécessitent souvent des compétences, des appareils spécifiques et des workflows manuels étendus. Pour soulager le développement d’avatars, Omniverse ACE permet une intégration fluide des technologies d’intelligence artificielle de Nvidia, y compris des conceptions prédéfinies, des ensembles d’outils et des applications de référence spécifiques à un domaine, dans des applications d’avatar construites sur la plupart des moteurs et publiées sur des clouds publics ou privés.

Étant donné qu’il a été dévoilé en septembre, Omniverse ACE a en fait été invité à choisir des partenaires pour recueillir les premiers commentaires. À présent, NVIDIA recherche des partenaires qui fourniront des commentaires sur les microservices, s’associeront pour améliorer l’élément et repousseront les limites de ce qui est possible avec des personnes numériques naturelles et interactives.

Le programme d’accès anticipé inclut l’accès aux versions préliminaires des microservices d’IA d’animation ACE et
d’IA conversationnelle, consistant en un microservice d’IA d’animation 3D pour les avatars tiers, qui utilise l’IA générative Omniverse Audio2Face pour donner vie aux personnages dans Unreal Engine et d’autres outils de création en produisant des images réalistes animation faciale à partir d’un simple fichier audio. Une variété d’autres mises à jour sont également proposées.

Des partenaires tels que Ready Gamer Me et Epic Games ont découvert comment Omniverse ACE peut améliorer les flux de travail pour les avatars IA.

Le microservice d’IA d’animation Omniverse ACE prend en charge les personnages 3D de Ready Gamer Me, une
plate-forme de développement d’avatars inter-jeux.

« Les avatars numériques finissent par devenir une partie considérable de notre vie quotidienne. Les gens utilisent des avatars dans les jeux, des événements virtuels et des applications sociales, et même comme un moyen d’entrer dans le métaverse », a déclaré Timmu Tõke, PDG de Ready Gamer Me, dans une déclaration. « Nous avons passé 7 ans à créer le système d’avatar parfait, permettant aux concepteurs de l’intégrer facilement dans leurs applications et jeux vidéo et aux utilisateurs de produire un avatar pour découvrir différents mondes – avec Nvidia Omniverse ACE, les groupes peuvent désormais apporter plus facilement ces personnages à la vie. »

L’innovation avancée MetaHuman d’Impressive Games a changé la création d’humains numériques pratiques et haute fidélité. Omniverse ACE, combiné au framework MetaHuman, permettra aux utilisateurs de développer et de publier encore plus facilement des avatars 3D attrayants.

L’IA générative arrive dans Omniverse

L’IA peut générer automatiquement les éléments des mondes virtuels .

Qu’il s’agisse de produire des êtres humains numériques sensés capables d’exprimer une émotion brute ou de structurer des mondes virtuels
immersifs, les acteurs des secteurs de la conception, de l’ingénierie, de l’imagination et autres à travers le monde atteignent de nouveaux
sommets grâce aux flux de travail 3D, Nvidia a déclaré.

Les animateurs, les développeurs et les concepteurs peuvent utiliser de tout nouveaux outils alimentés par l’IA, appelés IA générative, pour réinventer les environnements 3D, les simulations et le métaverse, l’évolution 3D d’Internet.

Basée sur le framework Universal Scene Description (USD), la plate-forme Omniverse – qui permet l’avancement des applications métavers – s’élargit avec des améliorations de Blender et une toute nouvelle suite d’outils d’IA générative spéculative pour les artistes 3D .

Nvidia a annoncé ces fonctionnalités, ainsi que la préinstallation d’Omniverse sur les ordinateurs portables Nvidia Studio et d’innombrables nouvelles propriétés USD totalement gratuites pour aider à accélérer l’adoption des flux de travail 3D.

De plus, une nouvelle version pour Mixer, maintenant facilement disponible dans l’OM niverse Launcher, apporte des capacités d’IA générative 3D aux utilisateurs de Blender partout. Un tout nouveau panneau permet aux utilisateurs de Mixer de transférer facilement les secrets de forme et
les personnages truqués. L’obstacle de rattacher la tête d’un personnage truqué peut désormais être résolu grâce à une
opération à un bouton d’Omniverse Audio2Face, un outil compatible avec l’IA qui génère automatiquement
des expressions faciales raisonnables à partir d’un fichier audio.

« L’IA générative est l’un des sujets les plus populaires sur le marché ces jours-ci, c’est pourquoi nous avons utilisé notre groupe d’étude de recherche et un tout nouvel aspect de la boîte à jouets AI qui intègre ces capacités d’IA générative dans la plate-forme », a déclaré Kerris.

Un autre nouveau panneau d’optimisation de scène permet aux utilisateurs de produire des scènes USD dans leurs flux de travail 3D multi-applications
plus rapidement et en temps réel.

De plus, Audio2Face, Audio2Gesture et Audio2Emotion, des outils d’IA génératifs qui permettent l’animation
immédiate de personnages en 3D, bénéficient de mises à jour d’efficacité qui facilitent l’intégration des concepteurs et
développeurs dans leurs pipelines 3D existants.

Les créateurs peuvent produire des expressions faciales à partir d’un fichier audio en utilisant Audio2Face ; des émotions raisonnables allant
de la joie et de l’excitation à la tristesse et au regret avec Audio2Emotion ; et des mouvements réalistes du haut du corps
à l’aide d’Audio2Gesture. Ces outils d’audio à l’animation changent la donne pour les artistes 3D, éliminant le
besoin d’effectuer des travaux manuels laborieux.

Toy Jensen a perdu son ballon.

Les outils de développement assistés par l’IA s’étendent à un plus grand nombre d’experts imaginatifs et techniques. Lorsque Nvidia Canvas a été introduit, il a permis aux artistes de produire parfaitement
des paysages et de les répéter avec des coups de pinceau faciles et l’IA. Bientôt, tous les utilisateurs de RTX pourront
télécharger une mise à niveau vers Canvas qui présente des images surround à 360° pour produire et conceptualiser
des environnements scéniques et des images magnifiques. L’AI ToyBox, qui comprend des extensions issues de
l’étude de Nvidia Research, permet aux développeurs de produire des maillages 3D à partir d’entrées 2D.

Les puissants outils d’IA d’Omniverse rationalisent les tâches complexes. Les créateurs de tous niveaux peuvent utiliser ces ressources
pour produire des sorties premium qui répondent aux besoins croissants de mondes matériels et virtuels dans le
métaverse.

« Le besoin de compétences 3D augmente, cependant découvrir la 3D peut être assez effrayant pour certains, et absolument chronophage », a déclaré Jae Solina, alias JSFilmz, dans un communiqué. « Cependant, ces nouvelles avancées de la plate-forme permettent non seulement aux créatifs et aux spécialistes techniques de continuer à travailler dans leurs outils 3D préférés, mais aussi de booster leur art et même d’utiliser l’IA pour les aider dans leurs flux de travail. »

Omniverse Launcher, le portail pour télécharger le matériel Omniverse et les applications de parrainage, a également été mis à la disposition des sous-traitants système afin qu’ils puissent le préinstaller, ce qui permet des expériences optimisées et prêtes à l’emploi pour les créateurs 3D sur Nvidia Ordinateurs portables validés par Studio. Gigabyte et Aorus seront les tout premiers
ordinateurs portables lancés en 2023 avec Omniverse Launcher préinstallé, élargissant l’accès à la plate-forme à une
variété croissante de créateurs de matériel 3D.

Nvidia RTX Remix est un logiciel gratuit plate-forme de modding, construite sur Omniverse, qui permet aux moddeurs de créer et de partager rapidement des mods #RTXON pour des jeux intemporels, chacun avec un lancer de rayons complet, des matériaux améliorés, NVIDIA DLSS 3 et NVIDIA Reflex. Sa sortie en accès anticipé est pour bientôt.

Le site Web avec le jeu RTX a été construit avec RTX Remix, et pour montrer à quel point il est facile pour les moddeurs d’activer RTX dans leurs mods, nous avons partagé RTX Remix avec le développeur initial de Portal : Prelude, un développeur non officiel La préquelle du portail a été lancée en 2008.

Les utilisateurs d’Omniverse peuvent également accéder à d’innombrables nouvelles possessions en USD gratuites, comprenant une expérience Nvidia RTX basée sur l’USD
Winter World Minecraft, et découvrir comment développer leur propre Nvidia Possède SimReady pour une structure de simulation complexe. Grâce à Omniverse, les créateurs peuvent charger leurs flux de travail existants à l’aide d’outils familiers tels qu’Autodesk Maya, Autodesk 3ds Max, Blender, Adobe Substance 3D Painter, etc., avec l’IA, des outils de simulation et un rendu accéléré par RTX en temps réel.

Tous les types de créateurs 3D peuvent profiter de ces tout nouveaux outils pour repousser les frontières de la simulation 3D
et de la construction de mondes virtuels. Les utilisateurs peuvent réinventer des mondes numériques et stimuler des personnages réalistes avec de toutes nouvelles
profondeurs d’imagination grâce à la passerelle entre les outils audio et d’animation, l’IA générative et le métaverse.

Nvidia a également déclaré avoir des outils réellement améliorés pour Isaac Sim afin de simplifier la conception et la publication de robots dans les environnements professionnels.

Enfin, Nvidia a déclaré que l’accès anticipé à l’adaptateur Unity Omniverse est désormais disponible. La version alpha de Mixer, désormais disponible dans Omniverse Launcher, permet aux utilisateurs de corriger la géométrie, de générer des UV automatiques et de décimer les informations CAO haute résolution en polycounts plus fonctionnels.