换脸只需一张照片,效果碾压deepfakes,梦露、蒙娜丽莎、爱因斯坦都动起来
伊瓢 发自 凹非寺
量子位 报道 | 公众号 QbitAI
一张梦露照片
风情万种的梦露
优雅得体的梦露
一张蒙娜丽莎画像
话痨的蒙娜丽莎
焦虑的蒙娜丽莎
一张爱因斯坦照片
委屈的爱因斯坦
跟人扯皮的爱因斯坦
是的,所有这一切,只需要一张图,无论是照片还是油画,只要有一张人像,都能立马动起来,照片变真人。
而且,你想用什么表情控制它,就可以用什么表情控制它。
甚至,控制画风鬼畜一点的人像也没问题。
当然,你要是觉得一张图出来的效果破绽比较明显,也可以用八张同一个人的照片,比如这个胡须男
然后照着另一个人说话的视频
就可以生成胡须男做出一样动作的视频
或者十六张照片
生成的效果长这样,几乎看不出bug了。
这项研究来自三星和俄罗斯斯科尔科沃科学技术研究所,堪称目前最强换脸神器,Deepfakes被拍在沙滩上,瑟瑟发抖。
甚至有人觉得,这已经完全可以“商用”了,拿来忽悠人什么的,压根区分不出来。
保持警惕,谨防新型电信诈骗。
还有人已经陷入恐慌,觉得这类技术已经弊大于利了。
有人认为这类技术可以停止研究了。
不知道是觉得太可怕,还是觉得换脸技术已经走到了终极?
当然,也有乐观主义者。
这么超现实的风格,简直让人想去买三星手机。
可以拿家里老照片来拍电影了~
放博物馆里好使啊!想想历史人物的画像能动起来,给我们做自我介绍多有趣。
嗯,这位朋友可能参观过故宫。
怎么实现
研究团队用到了元学习(meta learning),结合VoxCeleb1和VoxCeleb2两个视频数据集,将面部图像通过嵌入式网络映射到嵌入向量。
生成器网络通过卷积层集将面部特征输入映射到输出帧中,之后,通过嵌入器传递来自同一视频的帧集,平均得到的嵌入并使用它们来预测生成器的自适应参数。
然后,通过生成器传递不同帧的坐标,将得到的图像与人脸实际情况进行比较。
传送门
论文:
Few-Shot Adversarial Learning of Realistic Neural Talking Head Models
Egor Zakharov, Aliaksandra Shysheya, Egor Burkov, Victor Lempitsky
https://arxiv.org/abs/1905.08233
视频:
https://www.youtube.com/watch?v=p1b5aiTrGzY&feature=youtu.be
作者系网易新闻·网易号“各有态度”签约作者
— 完 —
小程序|get更多AI学习干货
加入社群
量子位AI社群开始招募啦,社群矩阵:AI讨论群、AI+行业群、AI技术群;
目前已有4万AI行业从业者、爱好者加入,AI技术群更有来自海内外各大高校实验室大牛、各明星AI公司工程师等。自由互相交流AI发展现状及趋势。
欢迎对AI感兴趣的同学,在量子位公众号(QbitAI)对话界面回复关键字“微信群”,获取入群方式。(技术群与AI+行业群需经过审核,审核较严,敬请谅解)
量子位 QbitAI · 头条号签约作者
վ'ᴗ' ի 追踪AI技术和产品新动态
喜欢就点「在看」吧 !
关注公众号:拾黑(shiheibook)了解更多
[广告]赞助链接:
四季很好,只要有你,文娱排行榜:https://www.yaopaiming.com/
让资讯触达的更精准有趣:https://www.0xu.cn/
随时掌握互联网精彩
- 1 古城老街蕴文脉 7925092
- 2 小孩引爆沼气家长付天价赔偿系谣言 7951370
- 3 正月初五为啥又叫破五 7818281
- 4 来看N种过年新玩法 7700266
- 5 网友路遇罕见白鹿如画中走出 7639468
- 6 岳云鹏回老家过年 弟弟罕见露面 7512945
- 7 美宣布对中国商品加征10%关税 7479868
- 8 媒体人称马布里已报警 7321274
- 9 谢娜晒7岁的跳跳俏俏 7297155
- 10 行在路上奔团圆 非遗民俗贺新春 7151902