首页 科技周边 人工智能 火山引擎超清修复Beyond经典演唱会,技术能力已对外开放

火山引擎超清修复Beyond经典演唱会,技术能力已对外开放

Apr 09, 2023 pm 11:51 PM
火山引擎 超分算法 ai降噪

7月3日晚,抖音携手环球音乐旗下厂牌宝丽金,直播经过火山引擎超清修复的Beyond Live1991生命接触演唱会及纪念音乐会精选内容,吸引了超1.4亿人次观看。

Beyond是一支成立于1983年的摇滚乐队,随着粤语音乐的兴起,Beyond乐队的名字成为一个时代的文化印记。“Beyond Live1991生命接触” 是Beyond第一次在红磡体育馆举办的演唱会,宝丽金随后发行的影碟在90年代几乎一盘难求。此后的31年中,这场演唱会成为几代歌迷的音乐启蒙和青春记忆。

受限于当时的拍摄器材、存储介质及录音设备技术,演唱会母带及网络上流传的各版本音视频质量欠佳。为了提升观看和听感体验,再现Beyond这场经典之作,火山引擎从画质和音质两个方面进行了修复。

火山引擎多媒体实验室介绍,早期软硬件设备落后,导致影片在制作、压缩、传输等过程中存在画面模糊、纹理丢失和噪声瑕疵等问题。提升画质的同时恢复尽可能多的细节,优化色彩并保留复古感,以及调节不同大小、姿态人像的修复效果,是本次修复的难点。

“我们的目标是从画面整体清晰度、人像五官复原度、色彩亮度、流畅度、美观度等方面对画质进行提升。”画质上,本次修复通过清晰度增强和瑕疵修复、分区域色彩亮度增强等算法,处理早期软硬件设备落后导致的问题。视频分辨率从不足540p提升到接近4K水平,帧率从25fps提升到60fps。

火山引擎超清修复Beyond经典演唱会,技术能力已对外开放

通过人像增强算法修复,黄家驹面部的眼线、毛孔等细节清晰可见

此外,火山引擎多媒体实验室还自研自适应人像增强算法,针对人脸压缩损伤、模糊、低分辨率等问题,进行修复增强。该技术基于深度学习,在消除人脸整体的模糊和压缩损伤的同时,进一步对人脸关键的五官进行细节重建。修复后,人物面部的胡须、毛孔清晰可见,给观众带来更佳视觉感受。

在音质修复方面,火山引擎音频技术团队通过音频降噪、音频超分和响度算法,消除噪声提升音质,解决响度、噪声干扰、带宽不足等问题。

与传统降噪方案不同,本次降噪算法针对音乐场景和人声场景,实现了兼容AI降噪算法,在保留音乐和人声的前提下,抑制周围噪声。音频超分算法则对演唱会中的人声部分进行频带拓展,丰富高频信息,使人声更加清晰。从频谱图中可以看到,通过超分模块的处理,原始音频的高频部分得到了拓展和增强。

火山引擎超清修复Beyond经典演唱会,技术能力已对外开放

通过音频超分算法的处理,原始音频大于12kHz的高频信息得到了一定程度的补全修复

由于演唱会的拾音情况不同,导致演唱会唱歌的声音有时候相对乐器声和环境音过小,火山引擎音频技术团队利用响度算法首先单独提取唱歌的部分,然后调整唱歌部分的响度,最后再混合,使得整体的人声更加舒适。

据了解,演唱会的这些修复能力均已通过火山引擎智能处理、音频技术产品对外提供服务。另外,火山引擎还对外开放了画质全链路端到端解决方案,覆盖上传、转码、传输、消费等环节,实现视频内容在画质、码率、体验等方面的全方位优化。

数字化技术正成为驱动文化传承的力量。相关报道显示,2021年10月,西瓜视频及火山引擎推出“经典视频4K修复计划”,通过技术手段,已累计修复完成71部经典动画片,修复后的内容可在西瓜视频、鲜时光TV免费观看。

火山引擎相关负责人介绍,未来还会利用更多先进技术修复经典影像,让经典焕发新生。



以上是火山引擎超清修复Beyond经典演唱会,技术能力已对外开放的详细内容。更多信息请关注PHP中文网其他相关文章!

本站声明
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover

AI Clothes Remover

用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool

Undress AI Tool

免费脱衣服图片

Clothoff.io

Clothoff.io

AI脱衣机

Video Face Swap

Video Face Swap

使用我们完全免费的人工智能换脸工具轻松在任何视频中换脸!

热工具

记事本++7.3.1

记事本++7.3.1

好用且免费的代码编辑器

SublimeText3汉化版

SublimeText3汉化版

中文版,非常好用

禅工作室 13.0.1

禅工作室 13.0.1

功能强大的PHP集成开发环境

Dreamweaver CS6

Dreamweaver CS6

视觉化网页开发工具

SublimeText3 Mac版

SublimeText3 Mac版

神级代码编辑软件(SublimeText3)

热门话题

Java教程
1664
14
CakePHP 教程
1422
52
Laravel 教程
1316
25
PHP教程
1266
29
C# 教程
1239
24
字节跳动豆包大模型发布,火山引擎全栈 AI 服务助力企业智能化转型 字节跳动豆包大模型发布,火山引擎全栈 AI 服务助力企业智能化转型 Jun 05, 2024 pm 07:59 PM

火山引擎总裁谭待企业要做好大模型落地,面临模型效果、推理成本、落地难度的三大关键挑战:既要有好的基础大模型做支撑,解决复杂难题,也要有低成本的推理服务让大模型被广泛应用,还要更多工具、平台和应用帮助企业做好场景落地。——谭待火山引擎总裁01.豆包大模型首次亮相大使用量打磨好模型模型效果是AI落地最关键的挑战。谭待指出,只有大的使用量,才能打磨出好模型。目前,豆包大模型日均处理1,200亿tokens文本、生成3,000万张图片。为助力企业做好大模型场景落地,字节跳动自主研发的豆包大模型将通过火山

营销效果大幅提升,AIGC视频创作就该这么用 营销效果大幅提升,AIGC视频创作就该这么用 Jun 25, 2024 am 12:01 AM

经过一年多的发展,AIGC已经从文字对话、图片生成逐步向视频生成迈进。回想四个月前,Sora的诞生让视频生成赛道经历了一场洗牌,大力推动了AIGC在视频创作领域的应用范围和深度。在人人都在谈论大模型的时代,我们一方面惊讶于视频生成带来的视觉震撼,另一方面又面临着落地难问题。诚然,大模型从技术研发到应用实践还处于一个磨合期,仍需结合实际业务场景进行调优,但理想与现实的距离正在被逐步缩小。营销作为人工智能技术的重要落地场景,成为了很多企业及从业者想要突破的方向。掌握了恰当方法,营销视频的创作过程就会

火山语音TTS技术实力获国检中心认证 MOS评分高达4.64 火山语音TTS技术实力获国检中心认证 MOS评分高达4.64 Apr 12, 2023 am 10:40 AM

日前,火山引擎语音合成产品获得国家语音及图像识别产品质量检验检测中心(以下简称“AI国检中心”)颁发的语音合成增强级检验检测证书,在语音合成的基本要求以及扩展要求上已达AI国检中心的最高等级标准。本次评测从中文普通话、多方言、多语种、混合语种、多音色、个性化等维度进行评测,产品的技术支持团队-火山语音团队提供了丰富的音库,经评测其音色MOS评分最高可达4.64分,处行业领先水平。作为我国质检系统在人工智能领域的首家、也是唯一的国家级语音及图像产品质量检验检测机构,AI 国检中心一直致力于推动智能

主打个性化体验,留住用户全靠AIGC? 主打个性化体验,留住用户全靠AIGC? Jul 15, 2024 pm 06:48 PM

1.购买商品前,消费者会在社交媒体上搜索并浏览商品评价。因此,企业在社交平台上针对产品进行营销变得越来越重要。营销的目的是为了:促进产品的销售树立品牌形象提高品牌认知度吸引并留住客户最终提高企业的盈利能力大模型具备出色的理解和生成能力,可以通过浏览和分析用户数据为用户提供个性化内容推荐。《AIGC体验派》第四期中,两位嘉宾将深入探讨AIGC技术在提升「营销转化率」方面发挥的作用。直播时间:7月10日19:00-19:45直播主题:留住用户,AIGC如何通过个性化提升转化率?第四期节目邀请到两位重

深探无监督预训练技术落地 火山语音“算法优化+工程革新”并举 深探无监督预训练技术落地 火山语音“算法优化+工程革新”并举 Apr 08, 2023 pm 12:44 PM

长期以来,火山引擎为时下风靡的视频平台提供基于语音识别技术的智能视频字幕解决方案。简单来说,就是通过AI技术自动将视频中的语音和歌词转化成文字,辅助视频创作的功能。但伴随平台用户的快速增长以及对语言种类更加丰富多样的要求,传统采用的有监督学习技术日渐触及瓶颈,这让团队着实犯了难。众所周知,传统的有监督学习会对人工标注的有监督数据产生严重依赖,尤其在大语种的持续优化以及小语种的冷启动方面。以中文普通话和英语这样的大语种为例,尽管视频平台提供了充足的业务场景语音数据,但有监督数据达到一定规模之后,继

全抖音都在说家乡话,两项关键技术助你'听懂”各地方言 全抖音都在说家乡话,两项关键技术助你'听懂”各地方言 Oct 12, 2023 pm 08:13 PM

国庆期间,抖音上“一句方言证明你是地道家乡人”的活动在吸引了全国各地的网友热情参与,话题最高登上抖音挑战榜第一位,播放量已超过5000万。这场“各地方言大赏”能够在网络上迅速走红,离不开抖音新推出的地方方言自动翻译功能的功劳。创作者们在录制家乡话的短视频时,使用了“自动字幕”功能,并选择了“转为普通话字幕”,这样就能够自动识别视频中的方言语音,并将方言内容转化为普通话字幕,让其他地区的网友也能轻松听懂各种“加密型国语”。福建的网友亲自测试后表示,就连“十里不同音”的闽南地区是中国福建省的一个地域

火山引擎和伊利合作举办的'健康+AI”生态创新大赛成功结束 火山引擎和伊利合作举办的'健康+AI”生态创新大赛成功结束 Jan 13, 2024 am 11:57 AM

健康+AI=?中老年脑健康营养解决方案、数智化营养健康服务、AIGC大健康社区方案……随着“健康+AI”生态创新大赛的展开,一个个蕴含技术能量、赋能健康产业的创新方案呼之欲出,“健康+AI=?”的答案正在慢慢浮现。12月26日,伊利集团与火山引擎联合主办的“健康+AI”生态创新大赛圆满收官,上海博斯腾网络科技有限公司、中科苏州智能计算技术研究院等6家优胜企业脱颖而出。在历时一个多月的角逐中,伊利携手优秀科创企业共同探索AI技术与健康产业的深度融合,将大赛期待值持续拉满。“健康+AI”生态创新大赛

无障碍出行更安全!字节跳动研究成果获CVPR2022 AVA竞赛冠军 无障碍出行更安全!字节跳动研究成果获CVPR2022 AVA竞赛冠军 Apr 08, 2023 pm 11:01 PM

近日,CVPR2022各项竞赛结果陆续公布, 字节跳动智能创作AI平台「Byte-IC-AutoML」团队在基于合成数据的实例分割挑战赛( Accessibility Vision and Autonomy Challenge ,下文简称AVA) 中,凭借自研的 Parallel Pre-trained Transformers (PPT) 框架脱颖而出,成为该比赛唯一赛道的冠军。论文地址:​​https://arxiv.org/abs/2206.10845​​本届AVA竞赛由波士顿大学(Bos

See all articles