首頁 > 科技週邊 > 人工智慧 > 火山引擎超清修復Beyond經典演唱會,技術能力已對外開放

火山引擎超清修復Beyond經典演唱會,技術能力已對外開放

WBOY
發布: 2023-04-09 23:51:04
轉載
1588 人瀏覽過

7月3日晚,抖音攜手環球音樂旗下廠牌寶麗金,直播經過火山引擎超清修復的Beyond Live1991生命接觸演唱會及紀念音樂會精選內容,吸引了超1.4億人次觀看。

Beyond是一支成立於1983年的搖滾樂隊,隨著粵語音樂的興起,Beyond樂隊的名字成為一個時代的文化印記。 「Beyond Live1991生命接觸」 是Beyond第一次在紅磡體育館舉辦的演唱會,寶麗金隨後發行的影碟在90年代幾乎一盤難求。此後的31年中,這場演唱會成為幾代歌迷的音樂啟蒙與青春記憶。

受限於當時的拍攝器材、儲存媒體及錄音設備技術,演唱會母帶及網路上流傳的各版本影音品質欠佳。為了提升觀看和聽感體驗,再現Beyond這場經典之作,火山引擎從畫質和音質兩方面進行了修復。

火山引擎多媒體實驗室介紹,早期軟硬體設備落後,導致影片在製作、壓縮、傳輸等過程中存在畫面模糊、紋理遺失和雜訊瑕疵等問題。提升畫質的同時恢復盡可能多的細節,優化色彩並保留復古感,以及調節不同大小、姿態人像的修復效果,是這次修復的難點。

「我們的目標是從畫面整體清晰度、人像五官復原度、色彩亮度、流暢度、美觀度等方面對畫質進行提升。」畫質上,本次修復透過清晰度增強和瑕疵修復、分區域色彩亮度增強等演算法,處理早期軟硬體設備落後所導致的問題。視訊解析度從不足540p提升到接近4K水平,幀率從25fps提升到60fps。

火山引擎超清修復Beyond經典演唱會,技術能力已對外開放

透過人像增強演算法修復,黃家駒臉部的眼線、毛孔等細節清晰可見

此外,火山引擎多媒體實驗室也自研自適應人像增強演算法,針對人臉壓縮損傷、模糊、低解析度等問題,進行修復增強。該技術基於深度學習,在消除人臉整體的模糊和壓縮損傷的同時,進一步對人臉關鍵的五官進行細節重建。修復後,人物臉部的鬍鬚、毛孔清晰可見,帶給觀眾更佳視覺感受。

在音質修復方面,火山引擎音訊技術團隊透過音訊降噪、音訊超分和響度演算法,消除雜訊提升音質,解決響度、雜訊幹擾、頻寬不足等問題。

與傳統降噪方案不同,本次降噪演算法針對音樂場景和人聲場景,實現了相容AI降噪演算法,在保留音樂和人聲的前提下,抑制周圍噪音。音頻超分演算法則對演唱會中的人聲部分進行頻帶拓展,豐富高頻訊息,使人聲更加清晰。從頻譜圖中可以看到,透過超分模組的處理,原始音訊的高頻部分得到了拓展和增強。

火山引擎超清修復Beyond經典演唱會,技術能力已對外開放

#透過音訊超分演算法的處理,原始音訊大於12kHz的高頻訊息得到了一定程度的補全修復

由於演唱會的拾音情況不同,導致演唱會唱歌的聲音有時相對樂器聲和環境音過小,火山引擎音訊技術團隊利用響度演算法先單獨提取唱歌的部分,然後調整唱歌部分的響度,最後再混合,使得整體的人聲更加舒適。

據了解,這些演唱會的修復能力都已透過火山引擎智慧處理、音訊技術產品對外提供服務。另外,火山引擎也對外開放了畫質全連結端對端解決方案,涵蓋上傳、轉碼、傳輸、消費等環節,實現影片內容在畫質、碼率、體驗等方面的全方位優化。

數位化科技正成為驅動文化傳承的力量。相關報導顯示,2021年10月,西瓜影片及火山引擎推出“經典影片4K修復計畫”,透過技術手段,已累積修復完成71部經典動畫片,修復後的內容可在西瓜影片、鮮時光TV免費觀看。

火山引擎相關負責人介紹,未來將利用更多先進技術修復經典影像,讓經典煥發新生。



#

以上是火山引擎超清修復Beyond經典演唱會,技術能力已對外開放的詳細內容。更多資訊請關注PHP中文網其他相關文章!

來源:51cto.com
本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn
熱門教學
更多>
最新下載
更多>
網站特效
網站源碼
網站素材
前端模板