Le nouvel outil de NVIDIA peut créer des objets 3D modifiables à partir de photos

Le nouvel outil de NVIDIA peut créer des objets 3D modifiables à partir de photos

Spread the love

Les chercheurs de NVIDIA ont créé un nouvel outil capable de transformer facilement des photos en objets 3D. Appelée NVIDIA 3D MoMa, la société affirme qu’elle peut permettre aux architectes, concepteurs, artistes conceptuels et développeurs de jeux d’importer rapidement des objets dans un moteur graphique pour la manipulation numérique.

La technologie fonctionne grâce à ce qu’on appelle le rendu inversé, une technique capable de reconstruire une série de photos fixes en un modèle 3D d’un objet ou d’une scène.

David Luebke, vice-président de la recherche graphique chez NVIDIA, décrit cette idée comme une sorte de « Saint Graal » pour la vision par ordinateur et l’infographie.

« En formulant chaque partie du problème de rendu inverse en tant que composant différentiable accéléré par GPU, le pipeline de rendu MoMa 3D de NVIDIA utilise des machines d’IA modernes et la puissance de calcul brute des GPU NVIDIA pour produire rapidement des objets 3D que les créateurs peuvent importer, modifier et étendre sans limitation. aux outils existants », dit-il.

3D MoMa prend une série de photos et les utilise pour créer des rendus 3D de l’objet formé avec un maillage triangulaire avec des matériaux texturés, ce que NVIDIA décrit comme un langage commun utilisé par les outils 3D dans diverses industries.

3D MoMa fonctionne avec les outils standard de l’industrie

Les studios de jeux, par exemple, créent généralement des objets 3D comme celui-ci avec des techniques de photogrammétrie complexes qui, selon NVIDIA, prennent beaucoup de temps et d’efforts manuels. Plus tôt cette année, NVIDIA a montré qu’il était capable de transformer une série de photos en scènes 3D en quelques secondes, et bien qu’il soit puissant, il n’a pas créé ce maillage triangulaire qui rendrait ces captures facilement modifiables.

Le MoMA 3D de NVIDIA change cela et génère des modèles de maillage triangulaires en une heure sur un seul GPU NVIDIA Tensor Core. La société affirme que la sortie est directement compatible avec les moteurs graphiques 3D et les outils de modélisation que les créateurs d’un large éventail d’industries utilisent déjà.

Les maillages triangulaires sont les cadres sous-jacents utilisés pour définir les formes dans les graphiques et la modélisation 3D.

« La reconstruction du pipeline comprend trois fonctionnalités : un modèle de maillage 3D, des matériaux et un éclairage. Le maillage est comme un modèle en papier mâché d’une forme 3D construite à partir de triangles « , explique NVIDIA. » Avec lui, les développeurs peuvent modifier un objet pour l’adapter à leur vision créative. Les matériaux sont des textures 2D superposées sur des maillages 3D comme une peau. Et NVIDIA 3D L’estimation du MoMa sur la façon dont la scène est éclairée permet aux créateurs de modifier l’éclairage des objets ultérieurement. « 

Les chercheurs ont montré l’instrument avec un certain nombre d’instruments de jazz dans la vidéo ci-dessus. L’équipe NVIDIA a d’abord capturé environ 100 images de chacun des cinq instruments du groupe de jazz sous différents angles, puis a transmis ces informations au système 3D MoMa. À partir de cette entrée, il a pu générer les modèles 3D requis pouvant être importés dans un éditeur 3D.

NVIDIA affirme que ces objets au rendu inversé peuvent être utilisés comme blocs de construction pour une scène animée complexe et vous permettent de les créer en une fraction du temps.

NVIDIA a publié un article sur le système 3D MoMa, l’un des 38 articles que les auteurs de NVIDIA présenteront cette semaine à la conférence Computer Vision and Pattern Recognition (CVPR).

#nouvel #outil #NVIDIA #peut #créer #des #objets #modifiables #partir #photos

Laisser un commentaire

Votre adresse e-mail ne sera pas publiée.

Facebook
WP Radio
WP Radio
OFFLINE LIVE