[腾讯]腾讯多媒体实验室技术分析「中国戏曲数字复兴行动」阶段性工作

近日，艺术发展中心发布「中国戏曲数字复兴行动」据了解，该行动是由艺术发展中心和腾讯联合发起的，依托腾讯 AI 图像修复，沉浸式 6DoF、AI 众多先进的数字技术，如人脸融合、虚实融合等，实现京剧 6DoF 程序录制和数字转换，35 经典戏曲高清复原等突破性进展，为百年戏曲艺术注入数字生命力。

中华人民共和国文化和旅游部

「探索数字技术，帮助戏曲传承和传播，以更好地促进中国戏曲的创造性转化和创新发展。在文化旅游部艺术司的关心和指导下，艺术发展中心与腾讯联合发起「中国戏曲数字振兴行动」，依托腾讯 AI 图像修复，沉浸式 6DoF、AI 数字技术，如人脸融合、虚实融合等，有助于戏曲艺术在大众层面的创新传播。 」

「项目自 2023 年 12 自本月启动以来，已取得阶段性成果，包括发布《中国戏曲数字焕新蓝皮书》，完成京剧 6DoF 程序录制和数字转换，2024年 和 2025 戏曲焕新年夜主题直播，35 部经典戏曲影像资料 AI 以及网络戏曲数字资源库专区、五套经典戏曲变装特效模板等内容。两次直播结合核心技术，邀请多个戏剧团参与录制，巧妙融合经典戏剧与数字技术。此外，《歌剧歌曲创作征集》活动在全国范围内同时启动，以更流行、更多样化的形式宣传歌剧，进一步增强歌剧的传播力。」

以上参考：中华人民共和国文化旅游部官方网站

基于腾讯多媒体实验室的自主研发 6Dof(6自由度)技术，可以 360 度解构经典戏曲程式，唱、读、做、玩，戏曲的一招一式都有程式，代表戏曲「身法之韵」，观众可以从任何角度放大和缩小观看，甚至可以高清呈现演员手腕转动、眼波流动等非常小的动作和情绪，为歌剧教学提供三维多维的细节。

（6DoF 经典京剧程式的技术录制)

腾讯多媒体实验室自主研发 6Dof(6自由度)技术和只能从固定的角度旋转 VR360 不同的三自由度，6Dof(六自由度)技术允许用户在三维空间中自由移动，并从任何位置和角度观察，从而带来更丰富的互动和沉浸感。这种自由度的提高取决于体积视频技术，它可以在三维空间中呈现真实的物体和场景。实现 6DoF 体验的关键技术包括体积视频的压缩、传输和渲染，它们确保了巨大的数据量能够在不同的设备和平台之间有效地流动，并呈现出良好的视觉效果。通过优化视频压缩算法，腾讯多媒体实验室提高了数据传输效率，增强了终端设备的渲染能力，保证了头部显示、网页、手机终端、微信applet等平台的流畅播放 6DoF 体积视频有效扩大了该技术的受众和应用场景。

河南豫剧院演员吴素真现场演绎教学豫剧程式「摘花」，她表示：「程式是戏曲表演艺术的基础，也是帮助戏曲演员塑造人物的灵魂。6DoF 技术对程式的多角度呈现可以帮助戏曲教学、研究等场景，让老师教得更清楚，让学生学得更轻松。」

由腾讯多媒体室实验室自主研发 AI 通过先进的图像修复技术修复的经典戏曲片段 AI 算法，能做到「修旧如旧」，让京剧《逍遥津》出现、豫剧《花木兰》、越剧《玉蜻蜓》·前游庵等传世的光影得到了「原汁原味」恢复，真实生动地恢复穿越古今的历史「家国之韵」。

（AI 修复技术重现越剧《玉蜻蜓》·前游庵》）

AI 图像修复技术在腾讯多媒体实验室积累了多年的多媒体通信和处理研发经验，包括智能分析、图像质量修复、图像质量增强和智能编码四个模块。

首先，使用各种智能评估算法的智能分析模块将对视频内容进行全面、多维的分析，主要是评估视频的运动和纹理复杂性、压缩失真等。

在获得不同维度的分析结果后，图像质量修复模块可以使用各种智能算法来有针对性地修复破坏图像质量的主要因素，包括但不限于划痕、垂直线、雪点、噪声、压缩失真、抖动等问题。

然后，图像质量增强模块将选择最佳的视频增强算法来提高图像的多维图像质量，提高视频在空间和时间上的分辨率和帧率，提高细节的清晰度和空域中的色彩丰富度。

在完成视频修复和图像质量提高后，智能编码模块可以降低输出文件的大小和视频传输成本，确保视频的主观质量不受影响，达到最佳的图像效果。

「人工修复更依赖于修复者的经验和对图片的理解，不同人修复的同一张图片可能会有很大的差异。」据腾讯多媒体实验室研发同事介绍，AI 在尊重历史和原版的基础上，图像修复技术可以很好地避免这个问题，保证画质的提高。

通过腾讯多媒体实验室虚实互动技术的融合，可以实时将表演融入其中 3D 并与虚拟场景 NPC、互动道具，满足观众对戏曲意境的更多想象。在直播间，观众身临其境地感受到越剧《十八相送》中梁山伯和祝英台在西湖边依依惜别的场景。

(虚实融合互动技术生动呈现西湖「十八相送」情景）

腾讯多媒体实验室负责人、腾讯杰出科学家刘山博士表示：「科技是促进发展的核心引擎，也是产品创新、业务升级和公益事业的关键力量。腾讯多媒体实验室一直在实践『以用户为本，科技向善』，在促进多媒体及相关领域的国际和国家标准制定的同时，创建音视频、互动沉浸和智能媒体核心能力矩阵，继续帮助腾讯可持续社会价值部门和公司多个业务部门服务全球用户，帮助行业发展，实践技术，促进数字文化遗产。」

腾讯可持续社会价值部数字文化实验室负责人舒展表示：「自建设以来，腾讯数字文化实验室开始系统地挖掘文化遗产保护和继承中遇到的困难和痛点，帮助传统文化继承与数字技术的深度结合。未来，腾讯希望通过数字技术，不仅能永久保存珍贵的歌剧文化遗产，还能让它在新时代焕发青春。」数字技术的创新应用不仅有助于歌剧的保护和继承，而且为歌剧的传播插上了创新的翅膀，使歌剧的传播形式更加多样化，让观众参与体验更加沉浸，让更多的人理解歌剧，爱上歌剧。

来源：互联网