点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

首页> 文娱频道> 资讯 > 正文

AI修复 扮靓影像

来源:人民日报海外版2023-09-18 09:13

  徐嘉伟

  从1839年达盖尔发明银版摄影术,到1895年卢米埃尔兄弟放映世界上第一批影片,再到如今智能手机赋能日常记录,影像一直是“对抗”流淌不停的时光长河、“留住”历史瞬间的重要载体。

  当经典影像从黑白变成彩色,从模糊变得清晰,AI影像修复让观众在更佳的观看体验中感受到科技的力量。

  1998年国产歼—10首飞AI修复对比画面。

  优化观看体验

  去年4月1日,张国荣《热·情》演唱会超清修复版一经上线就“刷屏”了众多用户的朋友圈,吸引了3000多万人在线观看。

  “一次偶然的机会,我们接触到宝丽金,他们正在寻找相关修复技术,于是大家一拍即合,开始了《热·情》演唱会的修复。”腾讯多媒体实验室视频处理技术负责人夏珍告诉记者,整个项目的传播效果完全超乎预期,也让团队看到老片修复在“C端”也非常有价值。

  一场23年前的演唱会,摄制水平与当下肯定无法相比,再加上演唱会场景中灯光复杂多变、人物运动等多重因素的影响,AI如何顺利完成修复工作?“整个修复过程基本是自动化的,主要包括智能分析、画质修复、画质增强和智能编码四个模块。”夏珍逐一介绍了其中的原理,在智能分析环节,对噪声、划痕、亮度、饱和度等维度进行数据分析;得到分析结果后,进行画质修复和画质增强,去除噪声、划痕、压缩失真等破坏画质的因素,并进行分辨率提升、色彩增强、倍帧等画质增强处理;最后则是利用编码技术对视频进行智能压缩,在保证画质的前提下尽量压缩视频文件尺寸,便于传播、观看。

  在特定内容修复之外,AI影像修复技术也已应用于影视剧修复当中。自2017年开始启动“高清修复计划”以来,优酷已经修复完成6000多部经典影视作品,多部早期影视剧修复后分辨率达到了4K的水平,其中不乏《唐伯虎点秋香》《红楼梦(1987版)》《新白娘子传奇(1992版)》等受到观众好评和喜爱的剧集。

  《新白娘子传奇(1992版)》AI修复前后对比画面。

  “《新白娘子传奇》是我参与修复的第一部影视剧,由于整体画质比较模糊,我们在AI模型训练过程中通过调整损失函数和训练方式,让模型具备了更强的生成能力。”优酷算法工程师李通在人脸修复方面颇有研究,经过他和同事的努力,睫毛、头发、皮肤纹理等高频细节都能够在画面分辨率放大的过程中,既去模糊,又得到细节补足,进而提升用户的观看体验。

  传承历史记忆

  “院线电影《追光万里》当中的经典影像修复,是我们团队接手的第一个有代表性的AI影视修复项目,当时我们用了半年左右的时间,陆续修复了电影中用到的纪实片段,其中包括黎民伟、黄柳霜、李小龙等人的珍贵影像史料,最早的可以追溯到上世纪20年代。”回忆起修复“粤籍电影艺术家”真实影像资料的过程,夏珍感慨万千,在他看来,这些纪实片段的修复,不仅提升了观感,更让观众得以触摸历史。

  这种触摸历史、传承记忆的感觉在重大节点和历史事件的影像修复上体现得尤为明显。去年国庆节,由央视军事与腾讯多媒体实验室联合策划的“彩色超清重现国庆阅兵高燃瞬间”用百余秒的时间带观众回顾了新中国15次国庆阅兵的珍贵历史瞬间,相关话题阅读量仅在微博平台就超2257万次。

  其中,由于技术水平有限,1953年到1958年的阅兵式影像素材均为黑白影像。为了更清晰、生动地还原当年阅兵式的盛况,夏珍和团队基于腾讯“光影焕新”智能影像修复平台,对这些黑白老片做了针对性处理。“这项工作并不是简单的一键上色。首先我们需要将视频拆分成一个个子视频,给每一个子视频中的一个关键帧上色,再由算法完成相邻的前后帧的自动化上色修复,最终形成完整的修复视频。”夏珍说,为了保证上色的准确性,团队还特地拜访了军事专家,确定不同制式服装、武器装备的颜色,校对时甚至细化到了老兵胸口佩戴的一枚勋章上不同条纹的具体颜色。

  “‘科技向善’是腾讯多媒体实验室的一个重要课题,我们一直在思考如何让技术在商业价值之外,发挥更大的社会价值。”夏珍表示,观众的点赞、转发等互动,正是科技的理性和情感的温暖实现交融的最佳体现,通过AI技术让观众与祖国产生跨越时间的情感共鸣,让他非常有成就感。

  在专业机构之外,不少技术达人也在利用AI工具生产相关修复视频。B站UP主@大谷的游戏创作小屋和人民日报先后合作了《AI修复歼击机首飞名场面》《AI画出一条大河波浪宽》《AI修复珍贵画面∣中国民众欢庆日本投降》等视频,在八一建军节、国庆节、日本宣布无条件投降纪念日等重要节点均取得了不错的传播效果。在人民群众敲锣打鼓、举着火把游行的彩色修复画面上,“最喜欢AI的一集”“真正的万人空巷”等弹幕不时飘过。

  应用前景广阔

  当前,随着短视频拍摄、创作工具的不断丰富,短视频平台用户在观看之余,也日渐参与到短视频生产中。数据显示,截至2023年二季度,快手应用的DAU(平均日活跃用户数)和MAU(平均月活跃用户数)分别是3.76亿和6.73亿,每日的视频上传量在千万级。

  “拍摄设备的硬件水平高低、二次创作过程中使用的素材质量差异、用户编辑和上传过程中多次转码造成的压缩损伤等因素都会给视频画质带来影响。”快手技术人员介绍,为了能让用户获得更加清晰的观看体验,音视频技术团队深入研究智能音视频修复及增强处理等相关技术,打造并落地了智能增强修复方案整合产品“快手质臻影音”,将AI技术应用于用户的日常使用过程中。

  AI修复后的《红楼梦(1987版)》。

  不管是经典影像修复还是用户生产内容的智能增强,其实都还只是AI技术在视频画质修复维度的应用。

  在采访最后,记者请几位技术大咖聊了聊AI影像修复技术在未来值得期待的应用和发展方向。

  在夏珍看来,作为AIGC(AI生成内容)的基础组件,画质增强技术在文生图、文生视频等方向上能帮助节省生成时间,生成更大、更清晰的图像和视频;在3D方向(如人脸建模)上使用超分技术则能大幅度提升建模的效果;随着手机等移动设备的处理能力不断提升,在云游戏、直播等场景下,超分技术也能帮助移动端用户获得更好的画质体验。

  “AI修复技术本身是可批量复制的,这也就意味着我们可以降本增效,大大提升修复效率和质量。但目前AI修复也存在一定局限,AI可以解决80%的问题,剩下20%的定制化、风格化的修复需求,AI的表现尚不如人工。”李通表示,下一步,他们将通过算法迭代和优化,不断提升修复模型的通用性、稳定性和风格化修复能力,拓展AI影视修复效能,延长更多经典影视作品的生命力。

  (本文配图由受访者提供)

[ 责编:张晓荣 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 习近平在浙江金华市考察调研

  • “海巡08”轮在上海列编

独家策划

推荐阅读
9月20日,2023世界制造业大会在安徽省合肥市启幕。大会以“智造世界·创造美好”为主题,包括人工智能、机器人、元宇宙等在内的众多前沿产品让参展者感受“智”造魅力。
2023-09-22 10:43
首创“1+6”一体化数字办赛服务平台、首条5G-Advanced万兆网络走进现实、境外“电子钱包”首次在境内“无缝对接”……即将开幕的杭州第19届亚运会,是史上首届提出智能办赛理念的亚运会,“智能亚运”成为中国尖端数字技术发展的展示窗口。
2023-09-22 10:42
为让更多好项目走出“深巷”,参展高校与各行业企业融合联动,打通基础研究、应用开发、成果转化和产业化链条,为专利成果转化按下加速键。
2023-09-22 10:42
今年峰会主题为“建设包容、普惠、有韧性的数字世界——携手构建网络空间命运共同体”,将围绕全球发展倡议、数字化绿色化协同转型、人工智能、算力网络、网络安全、数据治理、数字减贫、未成年人网络保护等议题举办20场分论坛。
2023-09-22 03:40
“天宫课堂”是一扇连接地球与太空的奇妙之门。这是中国航天员首次在梦天实验舱内进行授课。记者专程来到位于北京航空航天大学的地面课堂,在这里与同学们一起跟随航天员穿越波澜壮阔的星空,展开一场关于宇宙的美妙旅程。
2023-09-22 03:50
中共中央政治局常委、国务院总理李强9月21日在北京市调研专精特新企业发展情况。他强调,要深入贯彻落实习近平总书记重要指示精神,进一步坚定信心、保持定力,支持广大专精特新企业聚力科技创新、深耕细分领域,为推进科技自立自强、稳定产业链供应链发挥更大作用。
2023-09-22 03:30
党的十八大以来,我国将推进新型工业化作为全面建成社会主义现代化强国的关键支撑。做强做优做大实体经济,加快构建以先进制造业为骨干的现代化产业体系。
2023-09-22 03:30
报告围绕7个可持续发展目标,提供了全球与中国尺度的数据产品32套,弥补了指标监测的数据空缺,提升了指标监测与评估的空间精细度,揭示中国和全球环境变化新动态。
2023-09-22 03:30
人力资源和社会保障部职业能力建设司副司长王晓君认为,本届大赛为广大技能人才提供了展示精湛技能的舞台,搭建了相互切磋技艺的平台。
2023-09-21 10:37
本届工博会高校展区共815项参展项目,集中展示了高校创新科技成果,体现了高校在服务国家战略及加快实现高水平科技自立自强的担当作为。
2023-09-22 03:50
中国企业联合会、中国企业家协会20日在安徽合肥发布了2023中国企业500强榜单。其中申报发明专利74.34万件,比上年“500强”增长了10.48%,发明专利数量连续5年持续增长,占专利数比重为39.43%。
2023-09-21 10:36
研究人员发现了一种模式,在该模式下,钻石会像火山岩浆一样从地球深处喷涌而出。这种美丽而奇异的现象吸引了诸多学者的目光。研究人员调查发现,这些钻石形成于地壳深处约145公里处,以每小时18—132公里的速度喷发到地表。
2023-09-21 10:34
瑞士素有冰雪王国之称,畅享冰雪运动成为全球游客选择前往当地度假的重要原因之一。 适宜的自然环境促使冰雪运动成为瑞士的国民运动,几乎每个瑞士人都会滑雪。
2023-09-21 10:30
2017年正式通车的蒙内铁路穿越内罗毕国家公园、察沃国家公园等野生动植物保护区。 因此,未来应以落深落实《关于推进共建“一带一路”绿色发展的意见》为抓手,高质量持续推进绿色“一带一路”建设。
2023-09-21 10:30
金秋时节,之江大地热情涌动。浓郁的亚运氛围中,“大道之行——‘八八战略’实施20周年大型主题展览”9月8日起隆重举办。
2023-09-21 10:29
日前,《自然》杂志刊发了一篇揭示电荷储存聚集反应新机制的论文,这项研究或将以全新角度推动锂硫电池发展
2023-09-21 10:27
SKA中频天线的伺服控制系统需要满足高电磁屏蔽指标,才能实现高灵敏度观测。 SKA中频天线的背架是空间网架结构,采用螺栓球与拉杆螺连的方式安装。
2023-09-21 10:26
光明网《创新改变中国》栏目走进位于山东青岛的海信创新研发中心,探索我国激光显示领域的“软实力”和“硬科技”,感受显示领域的“未来之光”。
2023-09-20 15:00
冷湖镇,位于青海省海西蒙古族藏族自治州茫崖市。秋夜,茫茫戈壁,人迹罕至。仰望,星空璀璨,银河迢迢,仿佛沿着这条颠簸不平的土路,就能走进银河、踏入群星。
2023-09-20 04:45
加载更多