Le huitième événement du Salon académique postdoctoral de l'Université du Zhejiang : NetEase Fuxi discute des nouveaux domaines de l'intelligence

Le 5 juin, la huitième session du Salon académique postdoctoral de l'Université du Zhejiang s'est terminée avec succès sur le campus Yuquan de l'Université du Zhejiang. Cet événement est un salon académique conjoint organisé par l'Association postdoctorale de l'Université du Zhejiang et le laboratoire NetEase Fuxi. Les quatre conférenciers principaux, Ph.D. Fan Changjie, Ding Yu, Li Lincheng et Zhao Zeng, sont tous du laboratoire NetEase Fuxi. Le thème de ce salon est les résultats des travaux du laboratoire NetEase Fuxi dans le domaine de l'intelligence artificielle. Fan Changjie a partagé les résultats de la recherche sur la programmation orientée agent, Ding Yu a présenté les recherches connexes sur les humains virtuels numériques, Li Lincheng a expliqué les progrès de l'informatique visuelle et Zhao Zeng s'est concentré sur le partage des résultats de la construction du système AIGC. A travers ce salon, les participants ont eu une compréhension approfondie des réalisations innovantes de NetEase Fuxi Lab dans le domaine de l'intelligence artificielle et ont eu des échanges et des discussions approfondis. Cet événement de salon offre une plate-forme d'échange académique précieuse pour les boursiers postdoctoraux de l'Université du Zhejiang et favorise le développement de la coopération universitaire et de la recherche innovante.

Dans le partage, Fan Changjie, directeur de NetEase Fuxi, a déclaré qu'à mesure que le vieillissement de la nation s'accentue et que le dividende démographique disparaît, les pénuries de main-d'œuvre et les coûts élevés de la main-d'œuvre continueront de frapper tous les horizons. Par conséquent, laisser l’intelligence artificielle (IA) et les robots gérer des tâches répétitives et à haut risque et améliorer la valeur humaine est devenu aujourd’hui une tendance inévitable dans le développement de la société intelligente. En tant que premier laboratoire d'intelligence artificielle en Chine, NetEase Fuxi s'engage à explorer une voie axée sur la collaboration homme-machine pour résoudre les problèmes pratiques rencontrés par les entreprises, tels qu'un seuil d'IA élevé, un long cycle de recherche et développement et des difficultés de mise en œuvre des applications. .

La plateforme Aura Robot est un nouveau paradigme de programmation basé sur ce contexte et conçu autour d'idées telles que l'AOP. Sa valeur fondamentale est de fournir des interfaces et des services standardisés unifiés pour connecter les machines (ou IA) et les humains. À l'heure actuelle, de nombreuses entreprises de NetEase Fuxi sont connectées à cette méthode théorique. Prenons l'exemple de la construction de projets d'infrastructure clés dans le sud-ouest de la Chine : d'une part, la plate-forme permet aux excavatrices traditionnelles de réaliser une production intelligente grâce à la collaboration homme-machine, d'autre part, grâce à la distribution en ligne des tâches de crowdsourcing, les excavatrices traditionnelles ne maîtrisent pas. ne se livrent plus à des tâches répétitives, ennuyeuses et dangereuses. En plus des scénarios d'application de robots miniers, la plate-forme a également été mise en œuvre dans la création de visages de personnages de jeu, la détection de reconnaissance d'images et de textes, les parcs intelligents, le crowdsourcing artistique et d'autres scénarios, vérifiant ainsi la mise en œuvre solide, la durabilité et la réplicabilité de la collaboration homme-machine. sexe de plateforme.

Dans cet échange, le Dr Ding Yu du département humain virtuel numérique Fuxi de NetEase a présenté les derniers progrès de la recherche de pointe et des applications pratiques de Fuxi dans le domaine des expressions humaines virtuelles. Concernant les trois aspects de la synthèse, de la capture et de la liaison des expressions de l'IA, il a partagé l'exploration et la pratique approfondies de l'équipe Fuxi et a démontré les effets pratiques de l'application de ces technologies dans de nombreux jeux NetEase. Parmi eux, l’application du paradigme de programmation Fuxi AOP fournit une solution efficace pour modéliser le processus algorithmique de capture et de liaison d’expressions d’IA. Ce travail a été appliqué avec succès à de nombreux jeux NetEase, tels que « Ni Shui Han », « Tian Yu », « Meet Ni Shui Han » et « Ni Shui Han (Mobile Game) ». Le travail ci-dessus est dédié à la réalisation de la génération automatique et de la réutilisation entre caractères de paramètres d'expression 3D. En outre, Fuxi a publié plus de 20 articles de conférence et de revues de premier plan dans le domaine des expressions et a pris l'initiative de proposer 135 normes de classification pour les expressions, favorisant ainsi davantage les progrès de l'industrie. De plus, Fuxi a remporté le championnat et finaliste de l'Expression Perception Challenge (ABAW) à trois reprises consécutives dans les meilleures conférences dans le domaine de la vision de l'image (ICCV2021, CVPR2022-2023), remportant un total de six championnats et deux finalistes.

Le Dr Li Lincheng de NetEase Fuxi Visual Computing a principalement partagé l'exploration intelligente de la création de personnages et de scènes 3D pour les jeux et les applications Metaverse. Le processus de modélisation manuel précédent nécessitait une lourde charge de travail et était difficile à répondre aux besoins divers et personnalisés des utilisateurs. À cet égard, le Dr Li a présenté en détail les travaux de recherche de NetEase Fuxi sur la création intelligente de personnages et de scènes 3D (3D AIGC). Grâce à des solutions de création intelligentes basées sur des squelettes et des maillages 3D, les utilisateurs n'ont qu'à saisir des images ou du texte pour créer de véritables personnages en trois dimensions, reproduire des jumeaux numériques de scènes 3D réelles et même générer des scènes 3D idéales, répondant pleinement aux besoins de personnalisation et d'optimisation. expérience utilisateur. L’application de ces résultats offre des possibilités illimitées pour la construction du monde numérique et la représentation des données, et insuffle une nouvelle vitalité à l’industrie.

À la fin de l'échange, le Dr Zhao Zeng, un expert en intelligence artificielle de NetEase Fuxi, a partagé le contenu sur « NetEase Fuxi AIGC System Construction and Practice ». Il a souligné que la technologie de l'intelligence artificielle générative continue de mûrir, sous l'impulsion du langage naturel, et continue de rafraîchir la compréhension du public de ses effets génératifs sur le texte, les images, l'audio et la vidéo, ainsi que le contenu 3D. Cependant, lorsque la technologie de l’intelligence artificielle générative entre dans les scénarios industriels du domaine de la recherche, elle reste confrontée à de multiples défis, notamment des problèmes dans de multiples dimensions telles que la contrôlabilité, l’adaptabilité et le coût. En résolvant ces défis, la technologie de l’intelligence artificielle générative peut être mieux appliquée dans des scénarios réels.

Le modèle graphique et textuel auto-développé par NetEase Fuxi-Danqing

NetEase Fuxi développe une technologie d'intelligence artificielle générative depuis 2018 et a reçu le soutien de projets de R&D clés du département provincial des sciences et technologies du Zhejiang. L'échelle des modèles auto-développés est passée des 100 millions de paramètres les plus anciens à 100 milliards de paramètres. Le domaine des modèles s'est étendu du texte aux graphiques, en passant par la musique, les séquences comportementales et d'autres modalités, et il a accumulé une riche expérience dans la formation de modèles pré-formation. et l'optimisation de l'ingénierie. Les technologies pertinentes ont également été appliquées dans des scénarios commerciaux tels que les jeux de mots, les PNJ intelligents, la création assistée par texte, la création assistée par la musique, la conception artistique et les recommandations de recherche sur Internet au sein du groupe NetEase, et ont obtenu des résultats commerciaux significatifs.

En tant qu'institution nationale de premier plan spécialisée dans la recherche et l'application de l'IA pour les jeux et le divertissement, NetEase Fuxi continuera à explorer des domaines tels que l'apprentissage par renforcement, les actions d'image, les humains virtuels, le langage naturel, les portraits d'utilisateurs et les grands- des modèles de pré-formation à grande échelle, combinés aux capacités de crowdsourcing des robots intelligents, des prises de décision « humaines » et des boucles fermées de données sont introduites pour améliorer encore les capacités des agents intelligents.

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!