ZAO有风险!开源换脸工具FakeSwap今登GitHub排行榜,你也可以玩!
新智元报道
新智元报道
编辑:肖琴、鹏飞
【新智元导读】在换脸AI ZAO被负面评论淹没的同时,一款开源换脸工具FaceSwap今天以超过23000星登上GitHub排行榜。ZAO有风险,用开源软件自己玩更安全!
FaceSwap不允许用来创建不合适的内容的。
FaceSwap不允许在未经同意的情况下或为了隐藏其用途而换脸。
FaceSwap不允许用于任何非法、不道德或可疑的目的。
FaceSwap的存在是为了试验和发现AI技术,用于社会或政治评论、电影以及任何道德和合理用途。
收集照片和/或视频
从原始照片中提取人脸
利用从照片/视频中提取的人脸训练一个模型
使用训练好的模型对自己的照片/视频进行换脸
一个强大的 CPU
一个强大的 GPU
如果强大的CPU和GPU都没有,那么你需要非常耐心
git clone https://github.com/deepfakes/faceswap.git
python setup.py
python faceswap.py -h
python faceswap.py gui
<iframe class="video_iframe rich_pages" data-vidtype="2" data-mpvid="wxv_971211147171069952" data-cover="http%3A%2F%2Fmmbiz.qpic.cn%2Fmmbiz_jpg%2FUicQ7HgWiaUb3PGLoV2k0Jfkbyhu69ZWOFeyCWT5OmWUXT9iapvmiawCPoPQjd4SiaNl090NbBq8JiabhJibG9RuCh1kw%2F0%3Fwx_fmt%3Djpeg" allowfullscreen="" frameborder="0" data-ratio="1.7666666666666666" data-w="848" data-src="https://mp.weixin.qq.com/mp/readtemplate?t=pages/video_player_tmpl&action=mpvideo&auto=0&vid=wxv_971211147171069952"></iframe>
除ZAO、faceswap,如今的变脸技术已经越来越先进,甚至达到不仅换脸,还能“换人”的地步——同时改变面部表情、眼球运动和身体动作。下面介绍一些换脸技术的发展简史。
1、Deepfake
我们先看看最大名鼎鼎的 Deepfake 是何方神圣。
Deepfake 即 “deep learning” 和 “fake” 的组合词,是一种基于深度学习的人物图像合成技术。它可以将任意的现有图像和视频组合并叠加到源图像和视频上。
Deepfake 允许人们用简单的视频和开源代码制作虚假的色情视频、假新闻、恶意内容等。后来,deepfakes 还推出一款名为 Fake APP 的桌面应用程序,允许用户轻松创建和分享换脸的视频,进一步把技术门槛降低到 C 端。
特朗普的脸被换到希拉里身上
由于其恶意使用引起大量批评,Deepfake 已经被 Reddit、Twitter 等网站封杀。
2、Face2Face
Face2Face 同样是一项引起巨大争议的 “换脸” 技术。它比 Deepfake 更早出现,由德国纽伦堡大学科学家 Justus Thies 的团队在 CVPR 2016 发布。这项技术可以非常逼真的将一个人的面部表情、说话时面部肌肉的变化、嘴型等完美地实时复制到另一个人脸上。它的效果如下:
Face2Face 被认为是第一个能实时进行面部转换的模型,而且其准确率和真实度比以前的模型高得多。
3、HeadOn
HeadOn 可以说是 Face2Face 的升级版,由原来 Face2Face 的团队创造。研究团队在 Face2Face 上所做的工作为 HeadOn 的大部分能力提供了框架,但 Face2Face 只能实现面部表情的转换,HeadOn 增加了身体运动和头部运动的迁移。
也就是说,HeadOn 不仅可以 “变脸”,它还可以 “变人”—— 根据输入人物的动作,实时地改变视频中人物的面部表情、眼球运动和身体动作,使得图像中的人看起来像是真的在说话和移动一样。
HeadOn 技术的图示
研究人员在论文里将这个系统称为 “首个人体肖像视频的实时的源到目标(source-to-target)重演方法,实现了躯干运动、头部运动、面部表情和视线注视的迁移”。
HeadOn 的视频演示:
<iframe class="video_iframe rich_pages" data-vidtype="1" data-cover="http%3A%2F%2Fshp.qpic.cn%2Fqqvideo_ori%2F0%2Fb1341axowbw_496_280%2F0" allowfullscreen="" frameborder="0" data-ratio="1.7666666666666666" data-w="848" data-src="https://v.qq.com/iframe/preview.html?width=500&height=375&auto=0&vid=b1341axowbw"></iframe>
4、Deep Video Portraits
Deep Video Portraits 是斯坦福大学、慕尼黑技术大学等的研究人员提交给今年 8 月 SIGGRAPH 大会的一篇论文,描述了一种经过改进的 “换脸” 技术,可以在视频中用一个人的脸再现另一人脸部的动作、面部表情和说话口型。
例如,将普通人的脸换成奥巴马的脸。Deep Video Portraits 可以通过一段目标人物的视频(在这里就是奥巴马),来学习构成脸部、眉毛、嘴角和背景等的要素以及它们的运动形式。
5、paGAN:用单幅照片实时生成超逼真动画人物头像
最新引起很大反响的 “换脸” 技术来自华裔教授黎颢的团队,他们开发了一种新的机器学习技术paGAN,能够以每秒 1000 帧的速度对对人脸进行跟踪,用单幅照片实时生成超逼真动画人像,论文已被 SIGGRAPH 2018 接收。具体技术细节请看新智元的头条报道。
<iframe class="video_iframe rich_pages" data-vidtype="1" data-cover="http%3A%2F%2Fshp.qpic.cn%2Fqqvideo_ori%2F0%2Fy1345kz425x_496_280%2F0" allowfullscreen="" frameborder="0" data-ratio="1.7666666666666666" data-w="848" data-src="https://v.qq.com/iframe/preview.html?width=500&height=375&auto=0&vid=y1345kz425x"></iframe>
Pinscreen 拍摄了《洛杉矶时报》记者 David Pierson 的一张照片作为输入(左),并制作了他的 3D 头像(右)。这个生成的 3D 人脸通过黎颢的动作(中)生成表情。这个视频是 6 个月前制作的,Pinscreen 团队称其内部早就超越了上述结果。
伯克利紧急研发“火眼金睛”防伪克星
关注公众号:拾黑(shiheibook)了解更多
[广告]赞助链接:
四季很好,只要有你,文娱排行榜:https://www.yaopaiming.com/
让资讯触达的更精准有趣:https://www.0xu.cn/
随时掌握互联网精彩
- 1 地道风物品年俗 7953613
- 2 美对华加征10%关税背后真相 7975833
- 3 从春晚配角到主角他熬了20年 7850394
- 4 浓浓文化味 神州春意浓 7760755
- 5 被福州游神深深震撼 7677528
- 6 狗子坐主人腿上一本正经看电视 7527213
- 7 哪吒2因为时长砍掉镜头 7464453
- 8 普陀山消防员 制止不了就加入 7355645
- 9 又看到赵本山演小品了 7279726
- 10 辞旧“焕”新 春节消费活力满满 7123264