前些天,一位来自俄罗斯的工程师 Denis Shiryaev(丹尼斯·谢里亚耶夫),用 AI 技术修复了多部老视频,也在 YouTube 上火了一把。他已经利用 AI 技术修复了百年前的纽约、东京等地的街头视频。
1896 年的莫斯科,1911 年的纽约,还有1913 年的东京,Denis让人们感受到了,历史近在眼前,自己仿佛亲身穿越到一百年前。
视频加载中...
原本仅仅 50 秒的无声黑白电影,被 Denis 利用 AI 技术加上了色彩,并将其升级为 4K、60 fps 画质的高清版本。
纽约、东京、莫斯科视频修复:给网友交作业
1896 莫斯科:热闹的商业街头 (由于只能插入一个视频,因此后面两个视频都在我的下个视频里,喜欢的朋友可以点个关注查看哦)

1911 纽约:欧洲移民的美国梦

1913-1915 东京:明治维新后的稳定繁荣

而Denis Shiryaev 谦虚地表示,能够实现这些结果,都要归功于 DAIN、ESRGAN、DeOldify 等 AI 技术。通过这些技术,任何人都可以做到。
视频修复三步套路:提升画质、插帧、上色
1.提升画质利器:Gigapixel AI
据 Denis 介绍,他首先使用了 Topaz Labs 开发的商业图像编辑软件 Gigapixel AI,将原本分辨率极低的视频,按比例放大 600%,提升为 4K 画质。
2.补帧模型:DAIN
接着,Denis 使用深度感知视频帧插值模型 DAIN,在现有视频片段的关键帧之间,靠模型的「想象」创建并插入视频里以前并不存在的帧,以此将视频的帧率增加到 60 帧每秒。
3.上色:DeOldify
在上色环节,作者使用了 DeOldify,该技术的开发者目的就是为旧照片着色。其原理是使用 NoGAN 技术,它结合了 GAN 训练的优点,比如出色的上色效果,同时也消除了一些副作用,比如画面着色不稳定、闪烁的现象。

Denis 表示,自己热爱机器学习技术领域,修复古老视频只是他对这种技术应用的结果展示。他会继续在 GitHub 上寻找此类技术,并在博客持续分享自己的学习结果。