Maison Périphériques technologiques IA La recherche sur l'apprentissage automatique en acoustique pourrait débloquer un métaverse multimodal

La recherche sur l'apprentissage automatique en acoustique pourrait débloquer un métaverse multimodal

Apr 16, 2023 pm 06:34 PM
机器学习 元宇宙

La recherche sur l'apprentissage automatique en acoustique pourrait débloquer un métaverse multimodal

Des chercheurs du MIT et d'IBM Watson AI Lab ont créé un modèle d'apprentissage automatique pour prédire ce que les auditeurs entendront à différents endroits de l'espace 3D.

Les chercheurs ont d'abord utilisé ce modèle d'apprentissage automatique pour comprendre comment tout son présent dans une pièce se propage dans l'espace, créant ainsi une image d'une pièce en 3D de la même manière que les gens comprennent leur environnement à travers le son.

Dans un article co-écrit par Yilun Du, étudiant diplômé du Département de génie électrique et d'informatique (EECS) du MIT, les chercheurs montrent comment des techniques similaires à la modélisation visuelle 3D peuvent être appliquées à l'acoustique.

Mais ils doivent faire face à la différence de propagation du son et de la lumière. Par exemple, en raison des obstacles, de la forme de la pièce et des caractéristiques du son, les auditeurs situés à différents endroits de la pièce peuvent avoir des impressions très différentes du son, rendant les résultats imprévisibles.

Pour résoudre ce problème, les chercheurs ont intégré des fonctionnalités acoustiques dans leur modèle. Premièrement, toutes choses étant égales par ailleurs, l’échange des positions de la source sonore et de l’auditeur ne change pas ce que l’auditeur entend. Le son est également particulièrement affecté par les conditions locales, telles que les obstacles entre l'auditeur et la source du son.

Du a déclaré : « Jusqu'à présent, la plupart des chercheurs se sont concentrés uniquement sur la modélisation visuelle. Mais en tant qu'êtres humains, nous avons plusieurs modes de perception. Non seulement la vision est importante, mais le son est également important. Je pense que ce travail ouvre une voie passionnante. direction de recherche pour mieux utiliser le son pour modéliser le monde. "

Grâce à cette approche, le modèle de champ acoustique neuronal (NAF) résultant est capable d'échantillonner de manière aléatoire des points sur une grille pour en savoir plus sur les caractéristiques spécifiques à l'emplacement. . Par exemple, être proche d’une porte peut grandement affecter ce que l’auditeur entend de l’autre côté de la pièce.

Le modèle est capable de prédire ce qu'un auditeur est susceptible d'entendre à partir d'un stimulus acoustique spécifique en fonction de la position relative de l'auditeur dans la pièce.

L'article déclare : « En modélisant la propagation acoustique dans une scène comme un système linéaire invariant dans le temps, NAF apprend à cartographier en continu les positions de l'émetteur et de l'auditeur avec des fonctions de réponse impulsionnelle neuronale, qui peuvent être appliquées à des sons arbitraires. a démontré que la continuité du NAF nous permet de restituer le son spatial aux auditeurs à n'importe quel endroit et de prédire la propagation du son dans de nouveaux emplacements. "

Chuang Gan, chercheur principal au MIT-IBM Watson AI Lab, a également participé au projet. , il a déclaré : « Cette nouvelle technologie pourrait offrir de nouvelles opportunités pour créer des expériences immersives multimodales dans les applications Metaverse. »

Nous savons que tous les lecteurs de Reg ne seront pas enthousiasmés par ce cas d'utilisation.

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!

Déclaration de ce site Web
Le contenu de cet article est volontairement contribué par les internautes et les droits d'auteur appartiennent à l'auteur original. Ce site n'assume aucune responsabilité légale correspondante. Si vous trouvez un contenu suspecté de plagiat ou de contrefaçon, veuillez contacter admin@php.cn

Outils d'IA chauds

Undresser.AI Undress

Undresser.AI Undress

Application basée sur l'IA pour créer des photos de nu réalistes

AI Clothes Remover

AI Clothes Remover

Outil d'IA en ligne pour supprimer les vêtements des photos.

Undress AI Tool

Undress AI Tool

Images de déshabillage gratuites

Clothoff.io

Clothoff.io

Dissolvant de vêtements AI

AI Hentai Generator

AI Hentai Generator

Générez AI Hentai gratuitement.

Article chaud

R.E.P.O. Crystals d'énergie expliqués et ce qu'ils font (cristal jaune)
3 Il y a quelques semaines By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. Meilleurs paramètres graphiques
3 Il y a quelques semaines By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. Comment réparer l'audio si vous n'entendez personne
3 Il y a quelques semaines By 尊渡假赌尊渡假赌尊渡假赌
WWE 2K25: Comment déverrouiller tout dans Myrise
3 Il y a quelques semaines By 尊渡假赌尊渡假赌尊渡假赌

Outils chauds

Bloc-notes++7.3.1

Bloc-notes++7.3.1

Éditeur de code facile à utiliser et gratuit

SublimeText3 version chinoise

SublimeText3 version chinoise

Version chinoise, très simple à utiliser

Envoyer Studio 13.0.1

Envoyer Studio 13.0.1

Puissant environnement de développement intégré PHP

Dreamweaver CS6

Dreamweaver CS6

Outils de développement Web visuel

SublimeText3 version Mac

SublimeText3 version Mac

Logiciel d'édition de code au niveau de Dieu (SublimeText3)

Prévision du prix des pièces SUPRA pour 2025 Prévision du prix des pièces SUPRA pour 2025 Dec 09, 2024 pm 12:11 PM

La pièce SUPRA, une crypto-monnaie qui prend en charge un large éventail d'applications décentralisées, a beaucoup attiré l'attention des investisseurs. L'évolution potentielle de ses prix dépend de facteurs tels que la force de l'équipe, la croissance de l'écosystème, les tendances du marché, l'environnement réglementaire et les performances des concurrents. Les experts prédisent que la pièce SUPRA pourrait atteindre 0,60 à 1 dollar en 2025. Les fondements techniques du projet, l’écosystème en pleine croissance et l’optimisme du marché soutiennent l’augmentation des prix.

Quand arrivera la course haussière pour les pièces SuperVerse ? Quand arrivera la course haussière pour les pièces SuperVerse ? Oct 12, 2024 am 07:55 AM

Le calendrier de la course haussière des pièces SuperVerse dépend des conditions du marché, de l’avancement du projet et de la confiance des investisseurs. Le moment exact ne peut être prédit, mais cela pourrait survenir dans les mois ou les années à venir, à condition que le sentiment du marché soit optimiste, que le paysage concurrentiel soit favorable, que les projets progressent sans problème et que la confiance des investisseurs soit élevée.

L'impact de la mise à niveau d'Ethereum sur le prix de l'ETH: volatilité à court terme et valeur à long terme L'impact de la mise à niveau d'Ethereum sur le prix de l'ETH: volatilité à court terme et valeur à long terme Feb 27, 2025 pm 04:51 PM

Il existe deux aspects de la volatilité à court terme et de la valeur à long terme de l'impact de la mise à niveau d'Ethereum sur le prix de l'ETH. À court terme, les attentes du marché avant la mise à niveau affecteront la hausse des prix et la baisse, les problèmes techniques pendant le processus de mise à niveau peuvent entraîner une chute des prix, et après la mise à niveau, le phénomène de «vente d'attentes et d'achat» peut se produire. À long terme, les améliorations réussies amélioreront les performances du réseau, telles que l'augmentation du débit et la réduction des frais de transaction, et l'optimisation des modèles économiques, tels que la déflation, augmentant ainsi la rareté de l'ETH et les augmentations de prix de soutien.

Quels sont les fonds de fiducie de cryptage en niveaux de gris? Quels sont les fonds de fiducie de cryptage en niveaux de gris? Mar 05, 2025 pm 12:33 PM

Investissement en niveaux de gris: le canal des investisseurs institutionnels pour entrer sur le marché des crypto-monnaies. La société a lancé plusieurs fiducies cryptographiques, ce qui a attiré une attention généralisée, mais l'impact de ces fonds sur les prix des jetons varie considérablement. Cet article présentera en détail certains des principaux fonds de fiducie de crypto de Graycale. Grayscale Major Crypto Trust Funds disponibles dans un investissement GrayScale GRAYS (fondée par DigitalCurrencyGroup en 2013) gère une variété de fonds fiduciaires d'actifs cryptographiques, fournissant des investisseurs institutionnels et des particuliers élevés avec des canaux d'investissement conformes. Ses principaux fonds comprennent: ZCash (Zec), Sol,

Interprétation complète de la mise à niveau de l'ETH: la révolution technologique de la POW à Pos Interprétation complète de la mise à niveau de l'ETH: la révolution technologique de la POW à Pos Feb 27, 2025 pm 04:27 PM

Cet article interprète de manière exhaustive la mise à niveau majeure d'Ethereum du mécanisme de preuve de travail (POW) au mécanisme de preuve de la preuve (POS). Étant donné que le mécanisme POW a des limites telles qu'une consommation élevée d'énergie et une faible efficacité, et ne peut pas répondre à la demande croissante de l'évolutivité, de la vitesse et de l'efficacité de l'industrie de l'industrie, Ethereum a lancé cette mise à niveau. L'article compare les principes et les avantages et les inconvénients des deux mécanismes POW et POS, élabore les processus de mise à niveau clés tels que "la fusion", la mise à niveau Dencun et le fragment futur, et analysent l'impact de cette mise à niveau sur le modèle économique, l'écosystème, les développeurs, les utilisateurs et les mineurs, et enfin les discussions sur les défis techniques et de supervision relevés au cours du processus de niveau supérieur.

La dernière version des dix premiers échanges dans le Circle de la monnaie 2025 La dernière version des dix premiers échanges dans le Circle de la monnaie 2025 Mar 05, 2025 pm 09:12 PM

Cet article répertorie les dix premiers échanges dans le cercle des crypto-monnaies en 2025, prédit que Binance, Okx, Bitget et Gate.io deviendront les principaux échanges et analyseront six échanges potentiels, notamment Coinbase, Kraken, Bybit, MEXC, Bitfinex et Kucoin. L'article explore profondément les avantages, les inconvénients et le potentiel de développement futur de chaque échange, et attend avec impatience les quatre principales tendances de développement des échanges de devises en 2025: conformité, croissance des échanges de dérivés, trading social et communautation, et l'intégration du web3 et du méta-université. Enfin, l'article rappelle aux lecteurs de prêter attention à des facteurs tels que la sécurité, la liquidité, les frais de transaction, les produits commerciaux, l'expérience utilisateur, le service client et l'environnement réglementaire lors du choix d'une échange et met l'accent sur le nombre d'investissements.

Ethereum 2.0 Analyse complète: le chemin de la transformation de la POW à Pos Ethereum 2.0 Analyse complète: le chemin de la transformation de la POW à Pos Feb 27, 2025 pm 05:03 PM

La transformation de Ethereum 2.0 de POW à POS est un changement majeur dans la blockchain. La transformation provient de la consommation élevée d'énergie de POW et de mauvaises capacités de traitement des transactions, qui ne peuvent pas répondre aux besoins de développement de l'industrie. La "fusion" sera achevée en septembre 2022, et il y aura des plans de mise à niveau ultérieurs tels que Sharding. Le POW et le POS ont des différences évidentes de principe et d'avantages et d'inconvénients. La transformation affecte les modèles économiques et les écosystèmes, et fait également face à des défis aux niveaux de la technologie, de la communauté et de la réglementation, visant à améliorer l'évolutivité, la vitesse de transaction d'Ethereum et l'efficacité énergétique.

Tout ce que Flower crée la première étiquette de vin NFT Music NFT pour déclencher une nouvelle hauteur d'intégration de la numérisation et de la culture intelligentes Tout ce que Flower crée la première étiquette de vin NFT Music NFT pour déclencher une nouvelle hauteur d'intégration de la numérisation et de la culture intelligentes Mar 05, 2025 pm 05:42 PM

AllThingsflower: AI habilite et dirige l'ère numérization 3.0 de l'industrie du vin! AllThingsflower a une fois de plus innové l'industrie et lancé des produits innovants qui intègrent la musique d'IA, les étiquettes de vin numérique Mulberry Purple et NFT, combinant parfaitement la culture et la technologie, réalisant une mise à niveau complète du produit à la production culturelle et en soulignant la direction du développement futur de l'industrie du vin. Chaque étiquette de vin NFT est générée par l'algorithme AI d'Aiva.ai, intégrant parfaitement le parfum moelleux du vin violet de mûrier, l'héritage de la culture routière de soie avec les possibilités infinies de la technologie future. Fabrication de l'IA: la transformation numérique de l'industrie du vin traditionnel est différente des marques de vin traditionnelles.

See all articles