腾讯多媒体实验室助力科学WE大会：揭秘超清修复技术背后的故事
|
腾讯多媒体实验室在最近的2023腾讯科学WE大会上展现了其前沿的光影焕新技术，聚焦修复安德烈·海姆早期研究的视频。这项技术利用高清修复技术，让观众沉浸式领略科学的神奇。 这一技术实践背后得益于腾讯多媒体实验室多年来在视频处理领域的深厚积累。他们自研了多种针对旧影像的修复技术，包括去失真生成、超分、细节增强和色彩增强等，从而极大地提升了视频主观质量。
超清修复后的版本，实验对象噪声被去除，边缘清晰可见 专注于多媒体技术领域的腾讯多媒体实验室包含音视频编解码、网络传输和实时通信等领域，同时在老片修复方面也有深厚技术积累。他们曾参与《国庆阅兵》彩色修复、《七一香港回归》高清修复、张国荣《热·情》演唱会，以及《康熙王朝》、《天下人家》等多部经典影视剧高清修复工作，展现出了在修复历史影像方面的丰富经验。 这次对安德烈·海姆早期研究视频的修复，不仅仅是技术层面上的挑战，更是要达到观众沉浸式的观影体验。腾讯多媒体实验室专家研究员夏珍和他的团队制定了严格的标准，希望修复后的视频能够带给观众全新的沉浸感。 光影焕新修复引擎是这次修复工作的关键所在。它涵盖了智能分析、画质修复、画质增强和智能编码等模块，利用多种智能算法来修复各类破坏画质的主要因素，并提升画面的清晰度和色彩丰富度。 本次修复版视频的超大视频尺寸能在大屏幕上得以高质、流畅地现场播放，背后还有一项超能技术不得不提：视频编解码。这是一项容易被忽视的技术，但却是引领和驱动音视频技术发展的关键技术。它所解决的问题可以用一句话总结：在不改变视频主观质量的前提下，压缩视频的大小，以更顺畅、高质地在各个平台播放。 超高清技术的发展极大提升了视频的清晰度，但同时也让文件大小成倍增长。压缩之前的原视频极占存储空间，虽然分辨率是480p的，但码率高达50M/s，如果修复后的4K高清版本按高码率输出，将占据300GB的存储空间。 谈及至此，不得不提实验室的一项“王牌技术”：新一代国际编解码标准。它在业内广受关注。 该标准于2020年7月正式发布，成为视频产业跨时代的里程碑，相比上一代标准，其压缩性能显著提高，可在视频主观质量不变的条件下减少50%的数据大小，大大减少视频传输带来的流量、带宽成本，推动整个视频产业进化。 腾讯多媒体实验室正是这项标准制定的主要贡献者之一，提交的技术提案被国际和国内标准采纳，数量全球领先。同时，实验室专家们还在标准组织中担任包括新一代国际编解码标准联合主编、参考软件联席主席等重要席位。腾讯是中国最早参与并致力于开发视频信息压缩和解码标准的公司之一，现已在视频编解码技术上处于全球领先的地位。 在2023 MSU世界视频编码器大赛中，腾讯自研最新一代H.266/VVC编码器以其出色的压缩性能和节省带宽的能力,在此次竞争激烈的MSU FullHD编码大赛中脱颖而出。在1fps、5fps和30fps这三个速度档位上,Tencent266在15项关键指标中赢得了12项第一,第一总数全场最多。Tencent266还在全部VVC编码器中三个速度档位取得15项指标全部第一。此外Tencent266还在MSU世界视频编码器大赛10bit编码比赛，4K编码比赛与主观编码比赛中连续保持行业领先，均取得了全场最多的第一总数，证明Tencent266在不同应用场景下均能为用户用更低的带宽带来更好的画质。 与此同时，腾讯云音视频转码及相关媒体处理应用已于2021年7月全线支持新一代国际编解码标准，这是该标准首次在云上商用，填补了全球云厂商在该领域的空白。Tencent266在23年初上线腾讯云直播，腾讯云成为行业首个支持VVC直播的云厂商。 此外，腾讯多媒体实验室在标准截稿仅三个月后，发布了新一代国际编解码播放器，解码速度较标准参考软件快了约 20 倍，能对 UHD 影像进行实时解码，其性能在全球处于领先地位。 近年来，随着5G、人工智能等数字技术的发展，超高清视频技术成为推动我国超高清视频产业迅猛发展的重要动力。然而，在超高清内容生产端，则存在着超高清内容制作、经典老片及视频转高清的成本高、效率低等痛点，成为制约产业发展的关键因素。 夏珍表示，全球有非常多的诸如演唱会、电视剧、电影、纪录片等经典影像，腾讯多媒体实验室目前已经形成了较为完整的智能老片修复技术矩阵，未来希望通过超清沉浸感修复引擎，帮助更多的时代经典高质、高效地重现于观众面前。 这次修复工作展现了超清修复技术在视频内容修复和转换方面的巨大潜力。腾讯多媒体实验室希望通过这项技术帮助更多经典作品以高质、高效的方式重现于观众面前，同时也致力于推动多媒体技术在各个产业领域的应用。 这一创新展示了腾讯技术在传统文化传承和数字化领域的价值，为科技向善、可持续社会价值创新做出了新的贡献。 |
