大开眼界Facebook做了一个会开眼的
大开眼界:Facebook做了一个会“开眼”的AI,解救眨眼照片
[摘要]Facebook做了一个会“开眼”的AI,解救眨眼照片.
原标题:大开眼界:Facebook做了一个会开眼的AI,解救眨眼照片
郭一璞发自雨中的海淀
量子位报导 |公众号 QbitAI
端五的三天假期,你们是否是都穿得帅帅美美的出去浪了?
既然出门了,一定要拍照发朋友圈(尤其是拍女朋友,要修图,划重点)。
想象一下,当你带着貌若天仙的女友在海边,她穿着飘逸的波西米亚大摆长裙,海风吹着裙子飞舞,蓦然回首的一刻,露出新垣结衣般的笑容。
?
?
△等下一个天亮,把偷拍我看海的照片送我好吗
你抓拍下了这一刻,然后发现:哎呀,眨眼了。
可是,那一刻的姿势和美感再也没法复刻。
这下瞎了,等着回去打开PS把眼睛放上去吧。拍照5秒钟,P图两小时。
毕竟,P一双眼睛上去,这是多么不自然的一件事情。虽然Adobe也提供了算法来帮你P眼睛,但是仿佛还不如手动抠图来的真实。
Facebook的开眼AI
所以,Facebook帮你做了一个开眼AI,专治眨眼照片。
?
?
首先,找到一个GAN,由GAN来负责找一双眼睛,抠图抠出来放到你女朋友闭眼的照片上。系统中的一部分需要找到人脸,以及识别面部表情;另外一部份根据表情的反馈,重复创建有眼睛的图象。
但是,此时生成的照片过于不自然了。
因而,Facebook的研究人员灵机一动:我们的用户不是会在Facebook上发很多自己的照片吗?拿没P过的睁眼照片来当例子试试。
现在,看过标准答案的AI越发聪明了,它已可以生成一些毫无PS痕迹的照片。
?
?
第一列是标准答案,日常睁眼照片;
第二列是眨眼图原图;
第三列是Adobe算法抠图贴上去的效果;
第四列是学习了标准答案之后GAN的作品。
效果惊人,第四列中没有出现颜色不匹配的情况,也没有不自然的过渡痕迹
,就好像照片中的人物睁眼了一样。这个AI在测试中效果拔群。超过一半的测试中,人类测试员搞错了照片的真假。
效果好是有条件的
一个照片的开眼效果,既要斟酌AI奋斗,也要考虑数据的质量。
比如说,如果刘海挡住了眼睛,或者飞扬的头发遮住了眼睛的一部分:
?
?
那对不住,总会产生一些阴影之类的效果,影响开眼质量。
另外,还需要你的其他睁着眼睛的照片,Facebook做这件事就有一个天生的好处:很多用户都会在Facebook上传一些自己的照片,这些照片一方面可以拿来给AI做范例,另一方面还可以与贴完眼睛的照片对比,检验生成的质量和效果。
他们的这项研究,就叫做ExGANs。别想歪了,不是用了这个GAN就变Ex,这里的Ex是Exemplar,范例的意思。
从此以后,闭着眼睛也能自拍发Facebook了。
哦对了,这个社交站并不存在,不是么?
最后,附论文传送门~
Eye In-Painting with Exemplar Generative Adversarial Networks
作者:Brian Dolhansky, Cristian Canton Ferrer
发表于CVPR 2018
arXiv:
代码:
薏芽健脾凝胶吃多久宝宝脾虚怎么办丁桂牌薏芽健脾凝胶患上鼻窦炎吃什么药恢复快小儿氨酚黄那敏颗粒优卡丹
前列腺增生能吃希爱力吗
儿童如何健脾胃
什么中药调理便秘
宝宝肚脐贴撕下来妙招
怎样用碘酒治疗灰指甲
有灰指甲泡澡会得妇科病
有什么药能去除灰指甲
八个月孩子拉肚子
经典古方的当代魅力:“太极藿香正气液传统制作工艺”列入非遗名录
学习中国抗疫成功经验!印尼国会将藿香正气液用于新冠医学观察期患者
-
发改委官员北上广等特大城市户籍准入需有门
发改委官员:北上广等特大城市户籍准入需有门坎近日,国务院批转发展改革委《关于2014年深化经济体制改革重点...[详细]
-
油脂快讯安徽菜油市场价安稳江苏菜粕行情整
油脂快讯:安徽菜油市场价安稳 江苏菜粕行情整体安稳安徽菜油市场价格安稳10月9日,安徽地区菜油价格低迷,4级...[详细]
-
澳洲男子捕获罕见剑吻鲨被称沙鱼界活恐龙
澳洲男子捕获罕见剑吻鲨 被称鲨鱼界“活恐龙”这条剑吻鲨在澳大利亚新南威尔士州南部海岸附近被捕获。据英国...[详细]
-
首个清明节假日加班需付三倍工资综合中国安
首个清明节假日:加班需付三倍工资_综合_中国安全生产清明节假日当天,单位如安排劳动者加班,需依照相关规定...[详细]
-
国务院把该放的权利放开放到位促进市场公平
国务院:把该放的权利放开放到位 增进市场公平竞争人民北京7月8日电 据中国政府消息,国务院日前发布《关于促进...[详细]