7月4日消息,昨日晚间,在火山引擎技术支持下,抖音携手环球音乐旗下厂牌宝丽金,超清修
复“Beyond Live 1991生命接触演唱会”及纪念音乐会精选内容被超清修复并重映。直播在
抖音、西瓜视频、今日头条、鲜时光TV同步进行,当晚累计观看人次超1.4亿。
火山引擎多媒体实验室介绍,早期软硬件设备落后,导致影片在制作、压缩、传输等过程中存
在画面模糊、纹理丢失和噪声瑕疵等问题。如何处理成因复杂的质量退化同时恢复尽可能多的
细节,修复老旧视频的褪色并保留复古感,以及调节不同大小、姿态人像的修复效果,是本次
修复的难点。
“我们的目标是从画面整体清晰度、人像五官复原度、色彩亮度、流畅度、美观度等方面对画
质进行提升。”画质上,本次修复通过清晰度增强和瑕疵修复、分区域色彩亮度增强等算法,
处理早期软硬件设备落后导致的问题。视频分辨率从不足540p提升到接近4K水平,帧率从25f
ps提升到60fps。
此外,火山引擎多媒体实验室还自研自适应人像增强算法,针对人脸压缩损伤、模糊、低分辨
率等问题,进行修复增强。该技术基于深度学习,在消除人脸整体的模糊和压缩损伤的同时,
进一步对人脸关键的五官进行细节重建。修复后,人物面部的胡须、毛孔清晰可见。
在音质修复方面,火山引擎音频技术团队通过音频降噪、音频超分和响度算法,消除噪声提升
音质,解决响度、噪声干扰、带宽不足等问题。
与传统降噪方案不同,本次降噪算法针对音乐场景和人声场景,实现了兼容AI降噪算法,在保
留音乐和人声的前提下,抑制周围噪声。音频超分算法则对演唱会中的人声部分进行频带拓展
,丰富高频信息,使人声更加清晰。
演唱会的拾音情况不同,会导致唱歌的声音有时候相对乐器声和环境音过小,火山引擎音频技
术团队利用响度算法首先单独提取唱歌部分,再调整唱歌部分的响度,最后混合,使得整体的
人声更加舒适。
据了解,2021年10月,西瓜视频及火山引擎推出“经典视频4K修复计划”,通过技术手段,
一年内修复百部经典动画片,目前已完成71部。同时,对拥有珍贵历史影像的版权方,西瓜视
频还开放免费修复合作。
抖音相关负责人表示,修复经典,是传承,也是用数字技术最大化还原作品,带来视听新感受
。“未来,我们会联合火山引擎超清修复更多经典影像,让经典焕发新生。”