快捷搜索:  汽车  科技

当你被摄像头照到的时候(你站在街上歪头瞅摄像机)

当你被摄像头照到的时候(你站在街上歪头瞅摄像机)戳视频观看完整版(来源于B 站:大谷的游戏创作小屋)这一切,都被当时一位加拿大摄影师记录了下来,也歪打正着的,记录下了很多第一次看到摄像机的人的有趣反应,有盯着几秒钟后立刻跳开的,有直接看呆的,还有被好奇吸引一步三回头观望的,一个熟悉又陌生的年代,跃然于眼前。你站在街上歪头瞅摄像机,我在 100 年后隔着屏幕看你,如果要说遗憾,那无疑是黑白的色调,遮盖了时代的本色。前不久,一位 90 后北京小伙儿大谷(B 站可搜:大谷的游戏创作小屋),无意中看到了这段珍贵的影像资料,谁说经典必须是黑白?大谷借助 AI 的力量,给这段视频做了修复,用人工智能独有的浪漫,带我们完成了一场时光旅行。

文 | 木子Yanni

比「改编自真实事件」更震撼的,是直接站在真实面前。

你有没有见过 100 年前北京城的烟火气?街道上,行人、马车交错而行,《骆驼祥子》里的黄包车穿梭而过;如今要深入沙漠才能看到的骆驼,正驮着货物稳步走在大街上;小小的院儿门口,有催促孩童的动,也有挑担卖货的静,甚至在几分钟内就上演了三种不同的请安方式;与现在不同的是,街上悠然闲逛的大多都是男性;一个转头,还能瞅见在街边兴致盎然接力逗狗的老哥。

当你被摄像头照到的时候(你站在街上歪头瞅摄像机)(1)

来源于 B 站:大谷的游戏创作小屋

这一切,都被当时一位加拿大摄影师记录了下来,也歪打正着的,记录下了很多第一次看到摄像机的人的有趣反应,有盯着几秒钟后立刻跳开的,有直接看呆的,还有被好奇吸引一步三回头观望的,一个熟悉又陌生的年代,跃然于眼前。

你站在街上歪头瞅摄像机,我在 100 年后隔着屏幕看你,如果要说遗憾,那无疑是黑白的色调,遮盖了时代的本色。

前不久,一位 90 后北京小伙儿大谷(B 站可搜:大谷的游戏创作小屋),无意中看到了这段珍贵的影像资料,谁说经典必须是黑白?大谷借助 AI 的力量,给这段视频做了修复,用人工智能独有的浪漫,带我们完成了一场时光旅行。

戳视频观看完整版(来源于B 站:大谷的游戏创作小屋)

在修复这部 100 年前的“老北京 Vlog” 时,大谷主要解决了 3 个问题。

首先是“顿顿顿顿顿”,也就是动作不连贯。我们都知道,要想让眼睛看到的画面是流畅的,就得保证帧率不能低于 24 帧每秒,但这可是 100 年前拍摄的影像,帧数远远低于流畅的要求,除非按下快进键,否则画面看起来就是“顿顿顿顿顿”。

用当下主流的电影技术标准来审视这段“老北京 Vlog”,就会发现,视频中的每秒帧数都在 10 以下,用我们已经娇生惯养出的好莱坞大片观感来审视,确实不太友好,这就需要对视频进行「补帧」。

在这次视频修复中,大谷用到了一个叫做 DAIN 的工具,这是一个开源的人工智能补帧软件,可以“见缝插帧”,让每秒包含的帧数更多,从而让画面看起来更加丝滑,如同下雨天舌尖融化的巧克力。

当你被摄像头照到的时候(你站在街上歪头瞅摄像机)(2)

图片来源于网络:DAIN 操作界面

那么,问题来了,人工智能是如何做到“见缝插帧”的呢?两个字:脑补。

人类的脑补能力非常优秀,比如你下班回到家,二哈正吐着舌头在门口故作殷勤,一种不详的预感直冲头顶。果不其然,客厅的垃圾桶翻倒在地,卧室地面上躺着几只残破的枕头,还有一地凋零的羽毛。此时,你的脑海里浮现出了这样一幅画面:一只欢脱的狗子,摇头晃脑的撞倒垃圾桶,还不忘把它踹的更远,紧接着跑进卧室,后腿一用力就弹上了床,口爪并用,把枕头扯了个稀碎,还心满意足地躺在柔软的羽毛堆中睡了个午觉,最后,在听见钥匙插进锁眼的那一刻,它顿觉不妙,直直冲向门口卖萌献殷勤,以期逃掉一顿毒打。而当你在脑补这些画面时,狗子还以为你仅仅是在发呆,殊不知,一记回旋踢已经在你心头酝酿完成,预知狗子命运如何,还请各位自行脑补。

当你被摄像头照到的时候(你站在街上歪头瞅摄像机)(3)

图片来源于网络

人类能够自主进行脑补,但人工智能没有这么高级,它只能进行小幅度的脑补,就拿“老北京 Vlog”来说,它无法脑补一位骑着驴的老哥走过这条街会发生什么,却能够通过逻辑分析,知道驴四条腿的移动规律,以及背上的老哥因颠簸而上下抖动的程度,从而脑补出这些位移,精准“插帧”,就能让画面由“顿”变“顺”。

当你被摄像头照到的时候(你站在街上歪头瞅摄像机)(4)

来源于 B 站:大谷的游戏创作小屋

接下来要解决的问题就是,画质渣。

画质和分辨率是捆绑关系,想要提高画质,就得从分辨率下手。大谷使用了一款扩增分辨率的工具,叫做 ESRGAN,可以把渣画质的分辨率提升到 4K 水平,让花花草草都被看的分明。

当你被摄像头照到的时候(你站在街上歪头瞅摄像机)(5)

图片来源于网络:ESRGAN 操作界面

ESRGAN 是指「增强型超分辨率生成对抗网络」,由 SRGAN (超分辨率生成对抗网络) 升级而来,改进后的 ESRGAN,在修复时能够有效减少细节损失,更加逼真的还原画面细节。

当你被摄像头照到的时候(你站在街上歪头瞅摄像机)(6)

SRGAN、ESRGAN 还原效果与实际画面的对比

但不得不说,有时候,“画至清、则有瑕”,画质太过清晰,难免会把“瑕疵”推到观众眼前,这一点在老电影修复的过程中,就常常会发生。比如在《亮剑》修复版中,就出现了无比醒目的穿帮镜头:

当你被摄像头照到的时候(你站在街上歪头瞅摄像机)(7)

截图来源于《亮剑》修复版

所以,在此友情提示:观影重在沉浸感,你可以专注于看剧情、看演员、看特效,别的就算了,能过就过,千万别较真,比如我就根本没有注意到某部电影中精良的化妆技术。

当你被摄像头照到的时候(你站在街上歪头瞅摄像机)(8)

截图来自于某部忘了名字的电影

跑远了,我们说回到第三个问题,就是上色。人工智能本不认识颜色,看的多了,也就会了,大谷用的上色工具叫做 DeOldify,是一位美国小哥首发在 Twitter 上的,这款工具之所以能够给黑白电影和照片进行色彩还原,关键就在于其背后的训练模型 NoGAN,可以对单个帧去旧,同时根据数据集,精准分辨出画面上的马车、驴、狗等物体,完成对应的上色。

当你被摄像头照到的时候(你站在街上歪头瞅摄像机)(9)

图片来源于网络:DeOldify 操作界面

如果给人工智能一个完美的数据集,它恐怕能给灵魂都涂上颜色。

但在 AI 修复的过程中,也不免存在遗憾,比如视频中的上色是不精确的,因为上色工具所使用的数据集,还没能精准涵盖这一历史时期的样本,所以,只能说这种上色效果是合乎常理的,是人工智能基于现实所带来的浪漫复现。

突然想起一句话:我们所谓的故乡,不过是祖先流浪的最后一站。视频中的这些人,一生经历了些什么,我们不得而知,但在 AI 的修复下,时光突然被折叠,我们得以瞥见他们人生中的一瞬真实,这已经是科技最好的馈赠了。

是路人,也该好好路过。


嗨,这里是浅黑科技,在未来面前,我们都是孩子。想看更多科技故事,欢迎戳→浅黑科技(qianheikeji)

猜您喜欢: