


Kesannya meletup! Model generasi video pertama OpenAI dikeluarkan, lancar dan definisi tinggi dalam 1 minit, netizen: Seluruh industri adalah RIP
Feb 19, 2024 am 09:30 AMTadi, Ultraman mengeluarkan model generasi video pertama OpenAI Sora.
Mewarisi kualiti imej dan keupayaan mengikut arahan DALL·E 3 dengan sempurna, dan boleh menjana video definisi tinggi sepanjang 1 minit.
Pesta Musim Bunga Tahun Naga yang dibayangkan oleh AI, dengan bendera merah berkibar dan ramai orang.
Ramai kanak-kanak menonton pasukan tarian naga dengan rasa ingin tahu, dan sesetengah orang mengeluarkan telefon bimbit mereka untuk merakam gelagat orang yang berbeza.
Jalan-jalan Tokyo selepas hujan, tanah yang basah RefleksiKesan bayang cahaya neon setanding dengan RTX ON.
Tingkap kereta api yang sedang bergerak kadang-kadang disekat, dan pantulan watak-watak di dalam kereta muncul seketika, yang sangat menakjubkan.
Anda juga boleh menonton treler filem dengan kualiti blockbuster Hollywood:
Dari perspektif super dekat skrin menegak, cicak ini penuh dengan butiran:
mengajar AI untuk memahami dan mensimulasikan dunia fizikal dalam pergerakan , matlamatnya adalah untuk melatih model bagi membantu orang ramai menyelesaikan masalah yang memerlukan interaksi dunia sebenar
Menjana video berdasarkan gesaan teks hanyalah satu langkah daripada keseluruhan rancangan.menjana adegan kompleks dengan pelbagai watak dan pergerakan tertentu Ia bukan sahaja dapat memahami keperluan yang dibuat oleh pengguna dalam gesaan, tetapi juga memahami bagaimana objek ini wujud dalam dunia fizikal.
Sora juga boleh membuat berbilang tangkapan dalam satu video dan bergantung pada pemahaman bahasa yang mendalam untuk mentafsir perkataan kiu dengan tepat, mengekalkan watak dan gaya visual. Tokyo yang cantik dan bersalji sedang sibuk dengan orang ramai. Kamera bergerak melalui jalan-jalan bandar yang sibuk, mengikuti beberapa orang menikmati hari bersalji yang indah dan membeli-belah di gerai berdekatan. Kelopak bunga sakura yang cantik berkibar ditiup angin bersama-sama dengan kepingan salji. OpenAI tidak segan silu tentang kelemahan Sora semasa, menunjukkan bahawa mungkinsukar untuk mensimulasikan dengan tepat prinsip fizikal adegan kompleks, dan ia mungkin tidak dapat memahami hubungan sebab akibat .
Contohnya, "Lima ekor anak serigala kelabu sedang bermain dan mengejar antara satu sama lain di jalan berbatu terpencil."mengelirukan butiran spatial isyarat , seperti mengelirukan kiri dan kanan, dan mungkin mengalami kesukaran untuk menerangkan peristiwa dengan tepat dari semasa ke semasa seperti mengikuti kamera tertentu. Sebagai contoh, dalam perkataan gesaan "Bola keranjang melepasi bakul dan meletup", bola keranjang tidak disekat oleh bakul dengan betul.
Dari segi teknologi, OpenAI tidak banyak mendedahkan pada masa ini Pengenalan ringkas adalah seperti berikut:
Sora ialah model resapan, bermula daripada bunyi bising, ia boleh menjana keseluruhan video pada satu masa atau memanjangkan panjang video. Kunci
ialah menjana ramalan untuk berbilang bingkai pada satu masa, memastikan. bahawa subjek gambar boleh dikesan walaupun dia meninggalkan medan pandangan sementara boleh kekal tidak berubah.
Sama seperti model GPT, Sora menggunakan seni bina Transformer, yang sangat berskala.
Dari segi data, OpenAI mewakili video dan imej sebagai tampalan, serupa dengan token dalam GPT.
Dengan perwakilan data bersatu ini, model boleh dilatih pada julat data visual yang lebih luas berbanding sebelum ini, meliputi tempoh, resolusi dan nisbah bidang yang berbeza.
Sora membina penyelidikan lepas tentang model DALL·E dan GPT. Ia menggunakan teknologi kata gesaan pernyataan semula DALL·E 3 untuk menjana anotasi yang sangat deskriptif untuk data latihan visual, supaya ia boleh mengikuti arahan teks pengguna dengan lebih setia.
Selain dapat menjana video berdasarkan arahan teks semata-mata, model ini juga mampu mengambil imej statik sedia ada dan menjana video daripadanya, menghidupkan kandungan imej dengan tepat dan memberi perhatian kepada butiran kecil.
Model juga boleh mengambil video sedia ada dan memanjangkannya atau mengisi bingkai yang hilang, lihat kertas teknikal untuk maklumat lanjut (akan dikeluarkan kemudian) .
Sora ialah asas untuk model yang boleh memahami dan mensimulasikan dunia sebenar OpenAI percaya bahawa ciri ini akan menjadi peristiwa penting dalam mencapai AGI.
Ultraman menerima pesanan dalam talian
Sebilangan artis visual, pereka dan pembuat filem (serta pekerja OpenAI) telah pun mendapat akses kepada Sora.
Mereka mula menerbitkan karya baharu secara berterusan, dan Ultraman juga mula menerima tempahan dalam talian.
Masukkan kata gesaan anda @sama dan anda mungkin menerima balasan video yang dihasilkan.
Atas ialah kandungan terperinci Kesannya meletup! Model generasi video pertama OpenAI dikeluarkan, lancar dan definisi tinggi dalam 1 minit, netizen: Seluruh industri adalah RIP. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!

Artikel Panas

Alat panas Tag

Artikel Panas

Tag artikel panas

Notepad++7.3.1
Editor kod yang mudah digunakan dan percuma

SublimeText3 versi Cina
Versi Cina, sangat mudah digunakan

Hantar Studio 13.0.1
Persekitaran pembangunan bersepadu PHP yang berkuasa

Dreamweaver CS6
Alat pembangunan web visual

SublimeText3 versi Mac
Perisian penyuntingan kod peringkat Tuhan (SublimeText3)

Topik panas

Sumber terbuka! Di luar ZoeDepth! DepthFM: Anggaran kedalaman monokular yang cepat dan tepat!

Model MoE sumber terbuka paling berkuasa di dunia ada di sini, dengan keupayaan bahasa Cina setanding dengan GPT-4, dan harganya hanya hampir satu peratus daripada GPT-4-Turbo

KAN, yang menggantikan MLP, telah diperluaskan kepada konvolusi oleh projek sumber terbuka

Daya hidup kecerdasan super membangkitkan! Tetapi dengan kedatangan AI yang mengemas kini sendiri, ibu tidak perlu lagi bimbang tentang kesesakan data

Hello, Atlas elektrik! Robot Boston Dynamics hidup semula, gerakan pelik 180 darjah menakutkan Musk

Versi Kuaishou Sora 'Ke Ling' dibuka untuk ujian: menghasilkan video lebih 120-an, memahami fizik dengan lebih baik dan boleh memodelkan pergerakan kompleks dengan tepat

Tentera Udara A.S. mempamerkan jet pejuang AI pertamanya dengan profil tinggi! Menteri secara peribadi menjalankan pandu uji tanpa campur tangan semasa keseluruhan proses, dan 100,000 baris kod telah diuji selama 21 kali.
