Jadual Kandungan
GAN ayat 3D
Model Padanan Akustik Visual (AViTAR)
Pengurangan Getaran Terkena Visual (VIDA)
Suara Visual (VisualVoice)
Audio2Face
Rumah Peranti teknologi AI Xiaozha menghabiskan banyak wang! Meta telah membangunkan model AI khusus untuk Metaverse

Xiaozha menghabiskan banyak wang! Meta telah membangunkan model AI khusus untuk Metaverse

Apr 11, 2023 pm 07:58 PM
ai alam semesta asal

​Kecerdasan buatan akan menjadi tulang belakang dunia maya.

Kecerdasan buatan boleh digabungkan dengan pelbagai teknologi berkaitan dalam metaverse, seperti penglihatan komputer, pemprosesan bahasa semula jadi, rantaian blok dan kembar digital.

Xiaozha menghabiskan banyak wang! Meta telah membangunkan model AI khusus untuk Metaverse

Pada bulan Februari, Zuckerberg mempamerkan rupa Metaverse di Inside The Lab, acara maya pertama syarikat itu. Beliau berkata syarikat itu sedang membangunkan siri model AI generatif baharu yang akan membolehkan pengguna menjana avatar realiti maya mereka sendiri hanya dengan menerangkannya.

Zuckerberg mengumumkan satu siri projek akan datang, seperti Project CAIRaoke, model saraf hujung ke hujung sepenuhnya untuk membina pembantu suara pada peranti yang membantu pengguna berkomunikasi dengan pembantu suara mereka dengan lebih semula jadi . Sementara itu, Meta sedang berusaha keras untuk membina penterjemah pertuturan universal yang menyediakan terjemahan pertuturan ke pertuturan terus untuk semua bahasa.

Beberapa bulan kemudian, Meta menunaikan janji mereka. Walau bagaimanapun, Meta bukan satu-satunya syarikat teknologi yang mempunyai kulit dalam permainan. Syarikat seperti Nvidia juga telah mengeluarkan model AI yang dibangunkan sendiri untuk memberikan pengalaman Metaverse yang lebih kaya.

Xiaozha menghabiskan banyak wang! Meta telah membangunkan model AI khusus untuk Metaverse

Transformer pra-latihan sumber terbuka (OPT-175 bilion parameter)

GAN ayat 3D

GANverse 3D dibangunkan oleh NVIDIA AI Research and is Model yang menggunakan pembelajaran mendalam untuk memproses imej 2D ke dalam versi animasi 3D, alat yang diterangkan dalam kertas penyelidikan yang diterbitkan di ICLR dan CVPR tahun lepas, boleh menghasilkan simulasi dengan lebih pantas dan pada kos yang lebih rendah.

Model ini menggunakan StyleGAN untuk menjana berbilang paparan secara automatik daripada satu imej. Aplikasi ini boleh diimport sebagai lanjutan kepada NVIDIA Omniverse untuk memaparkan objek 3D dengan tepat dalam dunia maya. Omniverse yang dilancarkan oleh NVIDIA membantu pengguna membuat simulasi idea akhir mereka dalam persekitaran maya.

Penghasilan model 3D telah menjadi faktor utama dalam membina Metaverse. Peruncit seperti Nike dan Forever21 telah menyediakan kedai maya mereka di Metaverse untuk memacu jualan e-dagang.

Model Padanan Akustik Visual (AViTAR)

Xiaozha menghabiskan banyak wang! Meta telah membangunkan model AI khusus untuk Metaverse

Pasukan Makmal Realiti Meta bekerjasama dengan Universiti Texas untuk membina model kecerdasan buatan yang meningkatkan bunyi kualiti metaspace. Model ini membantu memadankan audio dan video dalam adegan. Ia mengubah klip audio untuk menjadikannya berbunyi seperti dirakam dalam persekitaran tertentu. Model ini menggunakan pembelajaran penyeliaan kendiri selepas mengekstrak data daripada video dalam talian rawak. Sebaik-baiknya, pengguna harus dapat melihat kenangan kegemaran mereka pada cermin mata AR mereka dan mendengar bunyi tepat yang dihasilkan oleh pengalaman sebenar.

Meta AI telah mengeluarkan AViTAR sebagai sumber terbuka, bersama-sama dengan dua model akustik lain, yang sangat jarang memandangkan bunyi adalah bahagian yang sering diabaikan dalam pengalaman metaverse.

Pengurangan Getaran Terkena Visual (VIDA)

Model akustik kedua yang dikeluarkan oleh Meta AI digunakan untuk menghilangkan gema dalam akustik.

Xiaozha menghabiskan banyak wang! Meta telah membangunkan model AI khusus untuk Metaverse

Model ini dilatih pada set data berskala besar dengan pelbagai pemaparan audio realistik daripada model 3D rumah. Reverb bukan sahaja mengurangkan kualiti audio, menjadikannya sukar untuk difahami, tetapi ia juga meningkatkan ketepatan pengecaman pertuturan automatik.

Xiaozha menghabiskan banyak wang! Meta telah membangunkan model AI khusus untuk Metaverse

VIDA adalah unik kerana ia menggunakan audio serta isyarat visual untuk pemerhatian. Menambah baik pada kaedah audio sahaja biasa, VIDA meningkatkan pertuturan dan mengenal pasti suara dan pembesar suara.

Suara Visual (VisualVoice)

VisualVoice, model akustik ketiga yang dikeluarkan oleh Meta AI, boleh mengekstrak pertuturan daripada video. Seperti VIDA, VisualVoice dilatih tentang isyarat audio-visual daripada video tidak berlabel. Model telah memisahkan pertuturan secara automatik.

Model ini mempunyai senario aplikasi yang penting, seperti membuat teknologi untuk orang cacat pendengaran, mempertingkatkan bunyi peranti AR boleh pakai, menyalin pertuturan daripada video dalam talian dalam persekitaran yang bising, dsb.

Audio2Face

Tahun lepas, Nvidia mengeluarkan versi beta terbuka Omniverse Audio2Face untuk menjana animasi muka dipacu AI untuk memadankan sebarang alih suara. Alat ini memudahkan proses animasi permainan dan kesan visual yang panjang dan membosankan. Aplikasi ini juga membenarkan pengguna mengeluarkan arahan dalam berbilang bahasa.

Xiaozha menghabiskan banyak wang! Meta telah membangunkan model AI khusus untuk Metaverse

Awal tahun ini, Nvidia mengeluarkan kemas kini pada alat itu, menambah ciri seperti BlendShape Generation untuk membantu pengguna mencipta set blendhapes daripada avatar neutral. Selain itu, kefungsian pemain audio penstriman telah ditambah, membenarkan penstriman data audio menggunakan aplikasi teks ke pertuturan. Audio2Face menyediakan model aksara 3D yang boleh dianimasikan dengan trek audio. Audio kemudiannya dimasukkan ke dalam rangkaian saraf yang mendalam. Pengguna juga boleh mengedit aksara dalam pasca pemprosesan untuk mengubah prestasi mereka.

Atas ialah kandungan terperinci Xiaozha menghabiskan banyak wang! Meta telah membangunkan model AI khusus untuk Metaverse. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Kenyataan Laman Web ini
Kandungan artikel ini disumbangkan secara sukarela oleh netizen, dan hak cipta adalah milik pengarang asal. Laman web ini tidak memikul tanggungjawab undang-undang yang sepadan. Jika anda menemui sebarang kandungan yang disyaki plagiarisme atau pelanggaran, sila hubungi admin@php.cn

Alat AI Hot

Undresser.AI Undress

Undresser.AI Undress

Apl berkuasa AI untuk mencipta foto bogel yang realistik

AI Clothes Remover

AI Clothes Remover

Alat AI dalam talian untuk mengeluarkan pakaian daripada foto.

Undress AI Tool

Undress AI Tool

Gambar buka pakaian secara percuma

Clothoff.io

Clothoff.io

Penyingkiran pakaian AI

AI Hentai Generator

AI Hentai Generator

Menjana ai hentai secara percuma.

Artikel Panas

R.E.P.O. Kristal tenaga dijelaskan dan apa yang mereka lakukan (kristal kuning)
2 minggu yang lalu By 尊渡假赌尊渡假赌尊渡假赌
Repo: Cara menghidupkan semula rakan sepasukan
4 minggu yang lalu By 尊渡假赌尊渡假赌尊渡假赌
Hello Kitty Island Adventure: Cara mendapatkan biji gergasi
4 minggu yang lalu By 尊渡假赌尊渡假赌尊渡假赌

Alat panas

Notepad++7.3.1

Notepad++7.3.1

Editor kod yang mudah digunakan dan percuma

SublimeText3 versi Cina

SublimeText3 versi Cina

Versi Cina, sangat mudah digunakan

Hantar Studio 13.0.1

Hantar Studio 13.0.1

Persekitaran pembangunan bersepadu PHP yang berkuasa

Dreamweaver CS6

Dreamweaver CS6

Alat pembangunan web visual

SublimeText3 versi Mac

SublimeText3 versi Mac

Perisian penyuntingan kod peringkat Tuhan (SublimeText3)

Bagaimanakah uvicorn terus mendengar permintaan http tanpa serving_forever ()? Bagaimanakah uvicorn terus mendengar permintaan http tanpa serving_forever ()? Apr 01, 2025 pm 10:51 PM

Bagaimanakah Uvicorn terus mendengar permintaan HTTP? Uvicorn adalah pelayan web ringan berdasarkan ASGI. Salah satu fungsi terasnya ialah mendengar permintaan HTTP dan teruskan ...

Bagaimana secara dinamik membuat objek melalui rentetan dan panggil kaedahnya dalam Python? Bagaimana secara dinamik membuat objek melalui rentetan dan panggil kaedahnya dalam Python? Apr 01, 2025 pm 11:18 PM

Di Python, bagaimana untuk membuat objek secara dinamik melalui rentetan dan panggil kaedahnya? Ini adalah keperluan pengaturcaraan yang biasa, terutamanya jika perlu dikonfigurasikan atau dijalankan ...

Di era CHATGPT, bagaimanakah masyarakat Q & A teknikal dapat bertindak balas terhadap cabaran? Di era CHATGPT, bagaimanakah masyarakat Q & A teknikal dapat bertindak balas terhadap cabaran? Apr 01, 2025 pm 11:51 PM

Komuniti Q & A Teknikal di Era CHATGPT: Strategi Respons Segmentfault StackOverflow ...

Bagaimana untuk mengendalikan ralat 'Pipa Tertutup' dengan baik dalam komunikasi paip pelbagai proses Python? Bagaimana untuk mengendalikan ralat 'Pipa Tertutup' dengan baik dalam komunikasi paip pelbagai proses Python? Apr 01, 2025 pm 11:12 PM

Python Multi-Process Pipa Ralat "Paip ditutup"? Semasa menggunakan kaedah paip dalam modul multiprocessing Python untuk komunikasi proses ibu bapa dan kanak-kanak, anda mungkin menghadapi ...

Bagaimana untuk menyelesaikan masalah kandungan pemuatan dinamik yang hilang apabila mendapatkan data laman web? Bagaimana untuk menyelesaikan masalah kandungan pemuatan dinamik yang hilang apabila mendapatkan data laman web? Apr 01, 2025 pm 11:24 PM

Masalah dan penyelesaian yang dihadapi apabila menggunakan Perpustakaan Permintaan untuk merangkak data laman web. Apabila menggunakan Perpustakaan Permintaan untuk mendapatkan data laman web, anda kadang -kadang menemui ...

Bagaimana untuk menggunakan Go atau Rust untuk memanggil skrip Python untuk mencapai pelaksanaan selari yang benar? Bagaimana untuk menggunakan Go atau Rust untuk memanggil skrip Python untuk mencapai pelaksanaan selari yang benar? Apr 01, 2025 pm 11:39 PM

Bagaimana untuk menggunakan Go atau Rust untuk memanggil skrip Python untuk mencapai pelaksanaan selari yang benar? Baru -baru ini saya telah menggunakan python ...

Apakah sebabnya untuk mengalihkan 404 kesilapan selepas log masuk dengan selenium? Bagaimana menyelesaikannya? Apakah sebabnya untuk mengalihkan 404 kesilapan selepas log masuk dengan selenium? Bagaimana menyelesaikannya? Apr 01, 2025 pm 10:54 PM

Penyelesaian untuk mengalihkan 404 kesilapan selepas log masuk simulasi apabila menggunakan selenium untuk log masuk simulasi, kami sering menghadapi beberapa masalah yang sukar. � ...

See all articles