Adobe présente un nouveau grand modèle d'IA pour réaliser une conversion 2D en 3D en seulement 5 secondes

Ce qu'il faut réécrire, c'est : le gyroscope de réalité virtuelle

Récemment, Adobe Research a collaboré avec des chercheurs de l'Université nationale australienne pour développer un nouveau grand modèle d'IA appelé LRM. Ce modèle convertit les images 2D en modèles 3D de haute qualité en seulement 5 secondes

Contrairement aux méthodes précédentes de formation sur de petits ensembles de données de manière spécifique à une classe, LRM utilise une architecture de réseau neuronal hautement évolutive basée sur Transformer avec plus de 500 millions de paramètres. Le modèle est entraîné de bout en bout sur environ 1 million d'objets 3D à partir des ensembles de données Objaverse et MVImgNet et prédit les champs de rayonnement neuronal (NeRF) directement à partir des images d'entrée

Source photo : yiconghong.me/LRM/

Le document "LRM : LARGE RECONSTRUCTION MODEL FOR SINGLE IMAGE TO 3D" indique que "la combinaison de modèles de grande capacité et de données de formation à grande échelle rend notre modèle très polyvalent et fonctionne bien selon une variété d'entrées de test, y compris des données réelles. captures du monde et génèrent des images de modèles) pour produire des reconstructions 3D de haute qualité.

Des expériences ont montré que LRM peut reconstruire des modèles 3D haute fidélité basés sur des images du monde réel et des images créées par des modèles générés par l'IA tels que DALL-E et Stable Diffusio. Le système peut générer des formes géométriques détaillées et préserver des textures complexes telles que le bois. grain. Cependant, LRM présente encore certaines limites dans la génération de textures dans les zones occluses.

En termes d'application, LRM a de larges perspectives. Il peut être appliqué à divers scénarios tels que le design industriel, les jeux et le divertissement. De plus, dans le domaine de l'AR/VR, LRM peut également améliorer l'expérience utilisateur en générant des environnements 3D détaillés en temps réel

Sans changer le sens original, le contenu qui doit être réécrit en chinois est : Source : venturebeat

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!