上视频也别轻信,眼见不为实

原标题:摄像换脸新境界:CMU不仅给人类变脸,还是可以给花草、天气变脸 | ECCV
2018

(一)获取数据(人脸)

yzc88亚洲城手机网页版,正文申请区块链研习社优质内容扶助安排

不久前某个 Reddit 用户将“神奇女侠” 盖尔·加朵(Gal Gadot)
的脸,P到了成长视频上,效果一定不错,而且她动用的是近日火爆的机械学习技能。

圆栗子 发自 凹非寺

急需准备图片数据:五个不等的人脸,各个表情,数量更多越好,约1万张以上会有比较好的交替效果。

本文由币乎社区(bihu.com)内容辅助安排救助

这一技能的关键在于,替换的脸要和原视频上的脸表情同步。几乎原理是由此算法识别出人脸的一定社团——不仅仅是肉眼、鼻子、嘴巴的地点,也包括颧骨、下巴、脸颊的形状,然后依据这几个特征点做替换。近期这一技巧并不曾完结以假乱真的地步。

yzc88亚洲城手机网页版 1

一般采用的格局是从摄像中截取,操作如下:


yzc88亚洲城手机网页版 2左:P得看不出破绽,右:破绽明显

把一段摄像里的脸面动作,移植到另一段摄像的台柱脸孔。

上视频也别轻信,眼见不为实。首先下载视频(本例用风行播放器下载)。

前段时间大热的Oben PAI花色,仅凭一张相片就能生成三维头像。

实则类似的脸部替换技术,早就被大面积选用在大片里了。例如半兽人、咕噜、阿凡达,它们都用了动作捕捉(Motion
Capture)技术。动作捕捉技术常用来电影工业,游戏产业,比如:

世家可能曾经习惯那样的操作了。

yzc88亚洲城手机网页版 3

yzc88亚洲城手机网页版 4

yzc88亚洲城手机网页版 5《亚丁湾盗》中的大卫·Jones(Davy
Jones)图片来源于:gamedev.stackexchange.com

yzc88亚洲城手机网页版 6

细分摄像片段(本例用爱剪辑)。

今日牵线的Deepfakes,是因此人为智能完结了视频换脸普通人使用高端娱乐显卡就能到位
《速度与心情7》中的换脸技术
。(因为主角意外与世长辞《速度与心思7》剧组被迫接纳过换脸技术。)

yzc88亚洲城手机网页版 7小岛秀夫的《病逝搁浅》,几时发售啊?(打岔)图片来源:dualshockers.com

就是目的主演并不是全人类,大致也算不上出色。眼睛鼻子嘴,至少零件齐全

因为目标是为着截取人脸部,所以剪切的摄像片段很器重。

yzc88亚洲城手机网页版 8

yzc88亚洲城手机网页版 9扮演深井冰,哦不,史矛革的卷福
图片来源于:businessinsider.com.au

那么,怎么着的迁移才可走出那几个规模,让这一个星球上的万物,都有机遇领取视频改造的恩泽?

视频分辨率要高清(否则截取的人脸像素太低);片段中目的人脸比较大、杰出、最好就是只有他自己一个人画面特写的视频片段。

速度与感情7的换脸技术

严刻说,这一技巧属于动作捕捉技术的一个小类,叫面部捕捉(face
capture)。那个脸上的黄点,是神色变化中的关键点,就像脸的“关节”一样,计算机只须求那个信息就能合成表情。而在脸部识别技术中,它被喻为面部追踪(face
tracking)。

yzc88亚洲城手机网页版 10

yzc88亚洲城手机网页版 11

yzc88亚洲城手机网页版 12

yzc88亚洲城手机网页版 13满脸的点是“关节”,连上线成为骨骼.图片来源于:petapixel.com

按着你想要的旋律开花:中老年神情包利器

从录像中截取图片(本例用Ffmpeg软件)。

Deepfakes技术浮现

半数以上生意文章只是用那种技术制作奇幻生物,然则工业光魔公司(Industrial
Light & Magic)更进一步,在银幕上复活了早已故影星。

出自卡耐基梅隆大学的团协会,开发了机动变身技能,不论是花花草草,仍旧万千气象,都能自如转换。

这时获取有目标人脸的一张张图纸。

yzc88亚洲城手机网页版 14

yzc88亚洲城手机网页版 15左:合成的(Synthetic)彼得·库欣扮演的威尔霍夫·塔金,右:影星盖·Henley图片来源于:nytimes.com

yzc88亚洲城手机网页版 16

接下来,需求删除不须求的图形(如有非目标人脸的,那就是数额清洗)。

独立:钢铁之躯

恐怖片影星Peter·库欣逝世于1994年。二零一六年在影视《星球大战外传:侠盗一号》中,技术人员将她拉进现代的巨幕。那位“现代”影星的私自是别的一位影星盖·Henley,技术人士捕捉了盖·Henley的表情,然后合成了数字版的Peter·库欣。即便两位影星的脸挺相似的,可是技术人士依然要处理很多细节难点,比如彼得·库欣发“啊”那一个音的时候是不动上嘴唇的。

云,也变得火急了

yzc88亚洲城手机网页版 17

yzc88亚洲城手机网页版 18

这一技术引发了很多争议,一些人代表不可以接受。即便影片得到了画像授权,依然有一对伦理难点亟待回答,大家应有在荧幕上复活故去的影星么?

或是是怀着当先大前辈Cycle-GAN(来自朱俊彦公司)
的象征,团队给自家的GAN起了个尤其环保的名字,叫Recycle-GAN

接下来写几行代码检测图片中的人脸并截取(利用OpenCV)。

尼古拉斯·凯奇

深度学习,另辟蹊径

动作捕捉技术的关键在于识外人的神采,越发是脸上那一个主要性的位点。而深度学习技能也能满意这一渴求,一些研讨集体照旧演示了狗尾续美利坚合众国前总统小布什,奥巴马,现任总理川普,以及俄联邦管辖普金的视频。

yzc88亚洲城手机网页版 19Face2Face
算法演示,上边的人提供表情音讯,下边的人提供脸的音信 图片来自:QUARTZ

纵深学习技能和那多少个专门的电影工业技术相比较,获得的结果要粗糙很多,更易于辨别出来,但是它也要便于很多。谷歌(谷歌)、微软、亚马逊(亚马逊)那些大集团的软件技术和平台都是当面的,深度学习技能火速发展,很多舆论都在切磋者之间共享,而且家用级其余显卡就能处理深度学习算法,不自然要用到云总括和特等统计机等技巧。

但那还没完,面部捕捉技术一度能手机上用了,比如 诺基亚 X 的 Animoji
技术。可以用于识别面部表情的技艺就能用于伪造表情。

yzc88亚洲城手机网页版 20苹果的
Animoji 图片源于:businessinsider.com

yzc88亚洲城手机网页版 21苹果官方的以身作则
图片来源于:medium.com

一些技巧爱好者也正值将这一技艺移植到安卓手机上,我提出谨慎选取这么些app。此外也期望手机的软硬件厂商尤其小心音信的安全,大家在取得便利的还要,手机也蕴藏了越多的私密消息,手机和电脑系统本身的安全性也值得花越多的力气去尊重,而不是不管打个补丁然后又让补丁失效。

好啊,已经能伪造视频了,但声音依旧造不了假的?吧?

并不是,Adobe 公司在二〇一六年示范了 Voco
技术,他能让你简不难单输入文字就能以假乱真人的响声。到如今截止那项技艺都不曾见到商业化的迹象,技术示范过程中Adobe表示,他们会在技术上做类似水印的事物,扶助人识别假冒的动静。

正要,加拿大的AI创业公司 Lyrebird
在二零一七年7月份申明,只要有1分钟的样书,他们就能模仿出您的响动。那听起来比
Adobe 的技巧还要夸张,因为 Adobe 声称它们要求20分钟的样书。

看来此间,可能您早就懵了。所以。。。怎么做?

骨子里接纳特效技术伪造视频很已经有了,Zach King
就是各样翘楚。有些只是一日游,有些东西却是别有用心。同理可得,不用盲目相信网上来看的摄像

yzc88亚洲城手机网页版 22每户只是游戏一下呐
图片源于:pinterest.com

日后,随意放在网上的相片、摄像、声音、文字都要求认真去对待,因为它们会被人用来冒充我们团结一心。大家尽管不是权贵富豪,但也受不了损失。

自我想已经有人发现到假冒视频的迫害,初叶做那类识别了,很快创业集团就会如不胜枚举般出现。本文小编将从技术和影响力两上边跟踪这么些事情的开展。

那位选手,入选了ECCV 2018

yzc88亚洲城手机网页版 23

yzc88亚洲城手机网页版 24

Recycle之道,时间知道

检测并截取的人脸(用于输入到神经网络中磨炼提取特征)。

夺宝奇兵

Recycle-GAN,是一只无监控学习的AI。

人脸替换的意义非凡信赖于这一个截取到的人脸图片的品质:

yzc88亚洲城手机网页版 25

不成对的二维图像数据,来陶冶视频重定向(Video Retargeting)
并不易于:

即使截取的人脸带有了过多的烦扰部分,那么替换效果就很差。


一是,假设没有成对数据,那在视频变身的优化上,给的限制就不够,不难发生不良局地极小值
(Bad Local Minima) 而影响生作用果。

直白重复后边的步调,直到获取丰盛多的人脸(七个必要互换的人脸)。

Oben PAI 让明星们享有虚构分身,在粉丝的手机里唱歌跳舞。

二是,只依靠二维图像的空间音信,要上学摄像的风格就很难堪。

yzc88亚洲城手机网页版 26

Deepfakes 则更索性,将来拍影片全程用替身,明星都不要出席了

yzc88亚洲城手机网页版 27

接下来再写几行代码修改人脸图片的宽高为统一大小,如256×256;

当然,不畏不想拍的始末,也拦不住网友们恶搞。被恶搞最多是川普、
尼古拉斯·凯奇。很快,会有更两个人以温馨竟然的法子面世在屏幕上,真假难辨。所以眼见也不肯定为实。

相关文章

发表评论

电子邮件地址不会被公开。 必填项已用*标注

*
*
Website