快捷搜索:  汽车  科技

谷歌ai解码设置:谷歌AI自动给黑白上色

谷歌ai解码设置:谷歌AI自动给黑白上色所以,研究人员喂给神经网络的是,大量的无标记视频数据。这是一个自我监督 (Self-Supervised) 的物体追踪模型。从彩色视频里,截取某一帧作参考。再把所有帧都变成黑白,AI仅仅依靠参考帧的颜色,便可以还原整段视频的色彩了。把影像从灰暗变到新鲜,只用了下面这一张图。并且,没有人告诉AI,哪里是人,哪里是柜子。

五色栗 发自 凹非寺

量子位 报道 | 公众号 QbitAI

谷歌ai解码设置:谷歌AI自动给黑白上色(1)

谷歌ai解码设置:谷歌AI自动给黑白上色(2)

△ 输入黑白,生成色彩

谷歌培育了一只AI,是一只自动给视频上色的AI。

从彩色视频里,截取某一帧作参考。再把所有帧都变成黑白,AI仅仅依靠参考帧的颜色,便可以还原整段视频的色彩了。

把影像从灰暗变到新鲜,只用了下面这一张图。

谷歌ai解码设置:谷歌AI自动给黑白上色(3)

并且,没有人告诉AI,哪里是人,哪里是柜子。

走到哪,都认识你

这是一个自我监督 (Self-Supervised) 的物体追踪模型。

谷歌ai解码设置:谷歌AI自动给黑白上色(4)

所以,研究人员喂给神经网络的是,大量的无标记视频数据。

模型要学会预测,黑白视频中,物体的颜色。

最关键的步骤,就是物体跟踪

谷歌ai解码设置:谷歌AI自动给黑白上色(5)

比如,AI看到了一辆汽车,没有人告诉它那是汽车。

但在黑白的图像里,它还是要准确找到这辆车所在的区域,把参考帧里相应区域的红色填过去。

谷歌ai解码设置:谷歌AI自动给黑白上色(6)

虽然,模型没有用参考标准标记 (Ground Truth Labels) 训练过。但从结果上看,神经网络依然学成了人类喜闻乐见的样子。

面包上的奶油,即便涂好的样子不同了,AI也依然记得。

谷歌ai解码设置:谷歌AI自动给黑白上色(7)

姿势也可以追踪

另外,研究人员发现,这个模型还可以用来追踪人类的姿势。

对于主角是人类的视频,神经网络只有了解他们的一举一动,才能更顺畅地为人类上色。

毕竟,他们动作比较多,还喜欢给自己加戏。你看——

你让我坐下?

谷歌ai解码设置:谷歌AI自动给黑白上色(8)

我就不坐下。

谷歌ai解码设置:谷歌AI自动给黑白上色(9)

我很厉害吧。

谷歌ai解码设置:谷歌AI自动给黑白上色(10)

再不鼓掌我…

谷歌ai解码设置:谷歌AI自动给黑白上色(11)

只要输入一帧带有骨架的图。

谷歌ai解码设置:谷歌AI自动给黑白上色(12)

AI就可以推断出,视频里其他帧的姿势了。

谷歌ai解码设置:谷歌AI自动给黑白上色(13)

那么,追踪功夫姿势的话,一定会更燃吧。

然而,并没有,可能只会更佛系,因为——

谷歌ai解码设置:谷歌AI自动给黑白上色(14)

谷歌ai解码设置:谷歌AI自动给黑白上色(15)

△ 你的黄色,不,是你的黄色

这是太极的上色效果。

注意,二者清晰度不同,不是AI的问题,是微信动图只支持2MB以内,的后果。

论文传送门:

https://arxiv.org/pdf/1806.09594.pdf

实习生招聘

量子位正在招募市场运营实习生,策划执行AI明星公司CEO、高管等参与的线上/线下活动,有机会与AI行业大牛直接交流。一份丰富的实习经历等你解锁~

工作地点在北京中关村。简历欢迎投递到quxin@qbitai.com

具体细节,请在量子位公众号(QbitAI)对话界面,回复“实习生”三个字。

量子位 QbitAI · 头条号签约作者

վ'ᴗ' ի 追踪AI技术和产品新动态

猜您喜欢: