Filem pemulihan Volcano Engine 4K telah dipilih untuk Festival Filem Beijing, dan teknologi berkaitan memenangi kejuaraan di CVPR2024

Pada 18 April, Festival Filem Antarabangsa Beijing ke-14 dibuka secara rasmi. Filem Hong Kong "Plan A" dan "The Pledge of Allegiance" yang dipulihkan bersama oleh Arkib Filem China, Douyin dan Volcano Engine telah dipilih dalam bahagian "Tribute and Restoration" dan akan ditayangkan pada 18 dan 19 April.

versi 4K poster filem "Plan A" dan "The Pact"

"Plan A" dan "The Pact" masing-masing dikeluarkan pada tahun 1983 dan 1978, lebih 40 tahun yang lalu. Pada Ogos 2023, Arkib Filem China, Douyin dan Enjin Gunung Berapi bersama-sama melancarkan "Projek Pemulihan Filem Hong Kong Klasik" dan mengumumkan pemulihan 100 filem Hong Kong. Kedua-dua filem yang ditayangkan kali ini datang daripada projek yang disebutkan di atas. Negatif penggambaran asal filem itu diimbas dalam format 4K di Hong Kong Keseluruhan proses pemulihan termasuk pemulihan fizikal dan digital oleh Arkib Filem China, pemulihan teknologi AI oleh Volcano. Enjin, dan kerjasama antara kedua-dua pihak Pemulihan seni dan aspek lain.

Volcano Engine ialah platform perkhidmatan awan yang dimiliki oleh ByteDance Ia telah bekerja dengan Xigua Video dan Douyin masing-masing untuk melengkapkan pemulihan 4K bagi 100 animasi klasik domestik dan konsert Beyond klasik.

Dalam "Projek Pemulihan Filem Hong Kong Klasik", Volcano Engine menggunakan teknologi AIGC pada adegan pemulihan filem lama buat kali pertama, menggunakan keupayaan penjanaan berkuasa model visual yang besar dan pengetahuan terdahulu yang kaya untuk mencapai kesan pemulihan dari segi kejelasan, warna, dan kelicinan penambahbaikan menyeluruh dari segi ketepatan dan penghapusan kecacatan, bilangan perkataan: 78.

Di satu pihak, keupayaan penjanaan model besar adalah kuat Dengan bantuan keupayaan penjanaan model besar Stable Diffusion, kesan pembaikan adalah lebih baik daripada algoritma sebelumnya, dan butiran gambar lebih semula jadi; model besar mempunyai keupayaan penstrukturan maklumat yang sangat kuat Selepas memasangkan data besar-besaran, sejumlah besar pengetahuan boleh diekstrak dan "disimpan" dalam parameter model Ruang penjanaan lebih kaya dan boleh mengendalikan lebih banyak senario pembaikan. Wang Yue, pengarah seni bina teknologi awan video Volcano Engine, memperkenalkan.

Pada masa ini, Enjin Gunung Berapi telah membuat satu siri pengoptimuman dalam algoritma dan kejuruteraan untuk menangani isu seperti kecenderungan model visual yang besar untuk menjana artifak atau tekstur palsu dalam adegan tertentu, serta kestabilan adegan video berbilang bingkai, untuk menambah baik model besar kecekapan pemprosesan dan kos kuasa pengkomputeran dalam senario.

Menurut kerja pembaikan yang mendalam, Makmal Multimedia Enjin Gunung Berapi telah mengoptimumkan lagi model visual besar dengan memperkenalkan modul pemberat ciri adaptif, gabungan pembelajaran tanpa pengawasan dan pembelajaran diselia, semantik teks dan kaedah latihan lain. Ia telah mencapai keputusan yang baik dalam beberapa aspek seperti pembinaan semula potret berkualiti sangat rendah, pelarasan warna filem pudar dan penjanaan strok yang hilang dalam teks.

Sebelum Pembaikan vs Selepas Pembaikan

Perbandingan sebelum dan selepas pelarasan warna filem pudar

Untuk mengekalkan tekstur filem asal yang "dibaik pulih seperti lama", pasukan teknikal juga membangunkan tekstur adaptif secara khusus sambil meningkatkan kelancaran tekstur imej yang rosak, pemandangan malam penyingkiran hingar dan kesan lain Skim peningkatan yang menambahkan butiran yang menyerupai bunyi filem.

Pada masa yang sama, menyelesaikan pelbagai masalah praktikal dalam pemulihan filem lama juga memberi nilai kepada penyelidikan akademik Makmal Multimedia Enjin Gunung Berapi. Dalam persidangan visi komputer teratas CVPR 2024, Volcano Engine Multimedia Laboratory memenangi kejuaraan dalam trek NTIRE ( Arah Aliran Baharu dalam Pemulihan dan Peningkatan Imej) Penyelesaian kemenangannya adalah berdasarkan pembelajaran segera (Pembelajaran Segera) penyelesaian peningkatan imej masalah membaiki kerosakan kompleks yang tidak dapat diramalkan (kemerosotan kompleks tidak diketahui) serupa dengan sejumlah besar filem lama.

"Kami sebenarnya melakukan pemulihan filem lama setiap hari." Wang Yue berkata bahawa masalah kualiti imej biasa seperti definisi rendah, kelancaran rendah, herotan warna dan kecacatan dalam filem lama telah diselesaikan pada filem besar Douyin. Ia juga ditemui secara meluas dalam penyerahan. Dengan berkhidmat kepada Douyin, Huoshan Engine telah membentuk satu set penyelesaian teknologi pemprosesan pintar yang agak lengkap untuk pemulihan filem lama.

Maklumat awam menunjukkan bahawa proses pemulihan filem adalah rumit dan remeh, dan pemulih yang berpengalaman mengambil masa sebulan untuk menyiapkan filem. Dalam beberapa tahun kebelakangan ini, melalui pembelajaran mendalam dan teknologi AI yang lain, telah menjadi mungkin untuk meningkatkan kualiti dan kecekapan pemulihan filem lama dengan ketara.

Ma Kede, penolong profesor Jabatan Sains Komputer di City University of Hong Kong, berkata perkembangan pesat teknologi kecerdasan buatan pada masa ini telah menunjukkan potensi besar pada masa hadapan, bukan sahaja masalah penyegerakan yang tidak audio dan video dalam beberapa filem lama akan diselesaikan dengan lebih berkesan melalui AIGC, tetapi AI juga dijangka akan belajar menilai kesan pembaikan secara automatik.

Filem lama Hong Kong membawa kenangan muda ramai penonton dengan kemahiran lakonan Jackie Chan yang luar biasa dan adegan aksi mendebarkan dalam "Plan A", serta persembahan lucu Xu Guanwen dalam "The Affair", telah membawa kejutan yang tidak terkira kepada penonton. Dengan peningkatan teknologi pemulihan, klasik dari masa lalu ini akan dihidupkan semula.

Semasa acara pra-tayangan "Plan A", penerbit filem kanan Sun Rong, yang pernah berkhidmat sebagai Naib Presiden Jackie Chan China, berkongsi dengan peminat di tempat bahawa Jackie Chan sebelum ini percaya bahawa cahaya dalam terowong dalam " Eagle Project" tidak cukup terang dan "klasik Hong Kong" Pasukan "Projek Pemulihan Filem" membuat pelarasan berdasarkan pendapat dan menebus penyesalan ciptaannya ketika itu.

Sun Rong, pengasas Dinosaur Pictures, bekas naib presiden Jackie Chan China dan naib presiden Sparkle Roll Films, berkongsi sebelum tayangan

Pada masa ini, penonton boleh menonton "Projek Pemulihan Filem Hong Kong Klasik" dalam talian di Douyin, Xigua Video "Untuk filem yang telah dipulihkan, versi filem yang dipulihkan 4K juga akan dikeluarkan satu demi satu.

Atas ialah kandungan terperinci Filem pemulihan Volcano Engine 4K telah dipilih untuk Festival Filem Beijing, dan teknologi berkaitan memenangi kejuaraan di CVPR2024. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!