点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

首页> 文娱频道> 资讯 > 正文

AI修复 扮靓影像

来源:人民日报海外版2023-09-18 09:13

  徐嘉伟

  从1839年达盖尔发明银版摄影术,到1895年卢米埃尔兄弟放映世界上第一批影片,再到如今智能手机赋能日常记录,影像一直是“对抗”流淌不停的时光长河、“留住”历史瞬间的重要载体。

  当经典影像从黑白变成彩色,从模糊变得清晰,AI影像修复让观众在更佳的观看体验中感受到科技的力量。

  1998年国产歼—10首飞AI修复对比画面。

  优化观看体验

  去年4月1日,张国荣《热·情》演唱会超清修复版一经上线就“刷屏”了众多用户的朋友圈,吸引了3000多万人在线观看。

  “一次偶然的机会,我们接触到宝丽金,他们正在寻找相关修复技术,于是大家一拍即合,开始了《热·情》演唱会的修复。”腾讯多媒体实验室视频处理技术负责人夏珍告诉记者,整个项目的传播效果完全超乎预期,也让团队看到老片修复在“C端”也非常有价值。

  一场23年前的演唱会,摄制水平与当下肯定无法相比,再加上演唱会场景中灯光复杂多变、人物运动等多重因素的影响,AI如何顺利完成修复工作?“整个修复过程基本是自动化的,主要包括智能分析、画质修复、画质增强和智能编码四个模块。”夏珍逐一介绍了其中的原理,在智能分析环节,对噪声、划痕、亮度、饱和度等维度进行数据分析;得到分析结果后,进行画质修复和画质增强,去除噪声、划痕、压缩失真等破坏画质的因素,并进行分辨率提升、色彩增强、倍帧等画质增强处理;最后则是利用编码技术对视频进行智能压缩,在保证画质的前提下尽量压缩视频文件尺寸,便于传播、观看。

  在特定内容修复之外,AI影像修复技术也已应用于影视剧修复当中。自2017年开始启动“高清修复计划”以来,优酷已经修复完成6000多部经典影视作品,多部早期影视剧修复后分辨率达到了4K的水平,其中不乏《唐伯虎点秋香》《红楼梦(1987版)》《新白娘子传奇(1992版)》等受到观众好评和喜爱的剧集。

  《新白娘子传奇(1992版)》AI修复前后对比画面。

  “《新白娘子传奇》是我参与修复的第一部影视剧,由于整体画质比较模糊,我们在AI模型训练过程中通过调整损失函数和训练方式,让模型具备了更强的生成能力。”优酷算法工程师李通在人脸修复方面颇有研究,经过他和同事的努力,睫毛、头发、皮肤纹理等高频细节都能够在画面分辨率放大的过程中,既去模糊,又得到细节补足,进而提升用户的观看体验。

  传承历史记忆

  “院线电影《追光万里》当中的经典影像修复,是我们团队接手的第一个有代表性的AI影视修复项目,当时我们用了半年左右的时间,陆续修复了电影中用到的纪实片段,其中包括黎民伟、黄柳霜、李小龙等人的珍贵影像史料,最早的可以追溯到上世纪20年代。”回忆起修复“粤籍电影艺术家”真实影像资料的过程,夏珍感慨万千,在他看来,这些纪实片段的修复,不仅提升了观感,更让观众得以触摸历史。

  这种触摸历史、传承记忆的感觉在重大节点和历史事件的影像修复上体现得尤为明显。去年国庆节,由央视军事与腾讯多媒体实验室联合策划的“彩色超清重现国庆阅兵高燃瞬间”用百余秒的时间带观众回顾了新中国15次国庆阅兵的珍贵历史瞬间,相关话题阅读量仅在微博平台就超2257万次。

  其中,由于技术水平有限,1953年到1958年的阅兵式影像素材均为黑白影像。为了更清晰、生动地还原当年阅兵式的盛况,夏珍和团队基于腾讯“光影焕新”智能影像修复平台,对这些黑白老片做了针对性处理。“这项工作并不是简单的一键上色。首先我们需要将视频拆分成一个个子视频,给每一个子视频中的一个关键帧上色,再由算法完成相邻的前后帧的自动化上色修复,最终形成完整的修复视频。”夏珍说,为了保证上色的准确性,团队还特地拜访了军事专家,确定不同制式服装、武器装备的颜色,校对时甚至细化到了老兵胸口佩戴的一枚勋章上不同条纹的具体颜色。

  “‘科技向善’是腾讯多媒体实验室的一个重要课题,我们一直在思考如何让技术在商业价值之外,发挥更大的社会价值。”夏珍表示,观众的点赞、转发等互动,正是科技的理性和情感的温暖实现交融的最佳体现,通过AI技术让观众与祖国产生跨越时间的情感共鸣,让他非常有成就感。

  在专业机构之外,不少技术达人也在利用AI工具生产相关修复视频。B站UP主@大谷的游戏创作小屋和人民日报先后合作了《AI修复歼击机首飞名场面》《AI画出一条大河波浪宽》《AI修复珍贵画面∣中国民众欢庆日本投降》等视频,在八一建军节、国庆节、日本宣布无条件投降纪念日等重要节点均取得了不错的传播效果。在人民群众敲锣打鼓、举着火把游行的彩色修复画面上,“最喜欢AI的一集”“真正的万人空巷”等弹幕不时飘过。

  应用前景广阔

  当前,随着短视频拍摄、创作工具的不断丰富,短视频平台用户在观看之余,也日渐参与到短视频生产中。数据显示,截至2023年二季度,快手应用的DAU(平均日活跃用户数)和MAU(平均月活跃用户数)分别是3.76亿和6.73亿,每日的视频上传量在千万级。

  “拍摄设备的硬件水平高低、二次创作过程中使用的素材质量差异、用户编辑和上传过程中多次转码造成的压缩损伤等因素都会给视频画质带来影响。”快手技术人员介绍,为了能让用户获得更加清晰的观看体验,音视频技术团队深入研究智能音视频修复及增强处理等相关技术,打造并落地了智能增强修复方案整合产品“快手质臻影音”,将AI技术应用于用户的日常使用过程中。

  AI修复后的《红楼梦(1987版)》。

  不管是经典影像修复还是用户生产内容的智能增强,其实都还只是AI技术在视频画质修复维度的应用。

  在采访最后,记者请几位技术大咖聊了聊AI影像修复技术在未来值得期待的应用和发展方向。

  在夏珍看来,作为AIGC(AI生成内容)的基础组件,画质增强技术在文生图、文生视频等方向上能帮助节省生成时间,生成更大、更清晰的图像和视频;在3D方向(如人脸建模)上使用超分技术则能大幅度提升建模的效果;随着手机等移动设备的处理能力不断提升,在云游戏、直播等场景下,超分技术也能帮助移动端用户获得更好的画质体验。

  “AI修复技术本身是可批量复制的,这也就意味着我们可以降本增效,大大提升修复效率和质量。但目前AI修复也存在一定局限,AI可以解决80%的问题,剩下20%的定制化、风格化的修复需求,AI的表现尚不如人工。”李通表示,下一步,他们将通过算法迭代和优化,不断提升修复模型的通用性、稳定性和风格化修复能力,拓展AI影视修复效能,延长更多经典影视作品的生命力。

  (本文配图由受访者提供)

[ 责编:张晓荣 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 巴基斯坦与印度宣布停火

  • 张海琴打破女子55公斤级三项世界青年纪录

独家策划

推荐阅读
“君子慎独,不欺暗室。”坚守学术诚信,是科学研究的基本要求,也是科研人员安身立命之本
2025-05-10 22:50
国家安全是安邦定国的重要基石,与我们每一个公民都息息相关。一些看似微不足道的行为,都有可能像蚁穴溃堤般,引发一系列连锁反应,威胁国家安全。
2025-05-10 14:22
满场跑的人形机器人,能透视的眼科手术设备,可诊疗阿尔茨海默病的大脑“地图”……昨天开幕的北京科博会如同北京未来产业新成果的全景展示。
2025-05-09 17:21
近日,某医院护士2017年发表的一篇论文引起广泛关注——其中不仅惊现“男性患子宫肌瘤”,还煞有介事地介绍对照组患者中“男27例”“女13例”。
2025-05-09 13:05
虽然名字中有熊又有猫,但是大熊猫的生活习性、身体特征、食性等方面都与猫科动物相差甚远;随着分子生物学发展,研究者认为大熊猫应属于熊科成员。
2025-05-09 09:48
糖在激活味蕾的同时,给公众健康带来了负面影响。而糖究竟是如何“诱惑”人类味觉的一直是个谜。
2025-05-09 09:46
香港中文大学教授张立团队联合深圳大学副教授王奔、中国科学院深圳先进技术研究院研究员徐天添等科研人员,成功研发全球首个磁控血液凝胶纤维机械人,有效实现颅内肿瘤精准治疗。
2025-05-09 09:45
近年来,《流浪地球》《独行月球》《问天》等国产影视作品受到观众喜爱,这正是航天科普与文艺跨界融合的结果。
2025-05-09 09:38
从进入隐生状态,到覆盖上冰膜,再到电子束攻击,其中的每个步骤,实验人员都需要保护好水熊虫。
2025-05-09 09:35
美国哈佛大学肯尼迪政府学院7日发表公报说,该院前院长、美国知名政治学者、“软实力”概念提出者约瑟夫·奈6日去世,享年88岁。
2025-05-08 12:55
量子计算测控系统是量子计算机的“神经中枢”,承担着量子芯片精密信号生成、采集与控制的核心职能。
2025-05-08 10:42
在火星地貌研究方面,地质地球所研究员秦小光和国家天文台研究员刘建军组成了黄金搭档。这些系统性突破不仅刷新了人类对火星环境演化的认知,更在行星科学领域镌刻下鲜明的“中国印记”。
2025-05-08 10:40
记者7日从中国科学院金属研究所获悉,来自该所等单位的科研人员成功研制出可漂浮的二氧化钛材料。二氧化钛是一种常用的半导体光催化材料,在光照下能产生具有塑料分解能力的羟基自由基。
2025-05-08 10:37
从总体架构看,现代化生态环境智能治理体系可以概括为“一大脑、两支撑、多场景”的结构布局。
2025-05-08 10:31
这条特高压输送的电能超一半是风能、光伏、储能等纯绿色电能。
2025-05-08 14:01
最近,不少北京移动和联通用户发现手机上出现了5G-A信号。5G-A是什么?对我们普通人来说又有什么用呢?
2025-05-08 09:34
历时6年采集沉积物样本,利用计算生物学研究技术,揭示真核生物祖先可能在海姆达尔纲古菌分化之前就已经形成。
2025-05-08 12:52
生命的力量,远比想象中更强大。
2025-05-08 10:59
党的十八大以来,以习近平同志为核心的党中央高度重视我国新一代人工智能发展,推动我国人工智能综合实力整体性、系统性跃升。
2025-05-08 10:28
光明智库以“当具身智能走出实验室——距离人手一台机器人,我们还有多远?”为主题举办新一期青年论坛
2025-05-08 12:01
加载更多