换头假视频固然有争议,但“深度视频肖像”这项技术潜力无限

全媒派
2018-06-29 09:45
摘要

今年4月,一段奥巴马大骂特朗普是“傻子”的视频迅速传开。实际上,这来自于一款视频换头术Deepfakes——将名人的脸完美移植到普通人的脸上,轻易就能伪造一段名人语录。此刻,眼见也不一定为实。

今年4月,一段奥巴马大骂特朗普是“傻子”的视频迅速传开。实际上,这来自于一款视频换头术Deepfakes——将名人的脸完美移植到普通人的脸上,轻易就能伪造一段名人语录。此刻,眼见也不一定为实。

不过很快,大众发现Deepfakes既不合情理又不够有说服力,就在这项技术即将过气之时,修复升级版的“深度视频肖像”(Deep Video Portraits,以下简称DVP)卷土重来,与此同时,专业打假软件Truepic获得了800万美元投资,专门针对Deepfakes进行Reddit网站的图片查证。

现在我们队这两项技术进行详细介绍和解读。

深度视频肖像 Deep Video Portraits

上为Deepfakes,下为DeepVideo Portraits

DVP技术其实是一项有趣的研究成果,和Deepfakes的“名人脸成人电影影星身”的置换不能混为一谈,二者甚至并不是基于同样的深度学习进行的图像处理。相较而言,DVP有更高的应用价值和更大的想象空间。

事实上,DVP就是去年8月在计算机图形专业组举办的年会SIGGRAPH收到的一篇论文的标题,指的是一种能复制动作、面部表情和演讲动作的图像学习技术,如下图。

DVP的特别之处,在于其综合性。以上图为例,DVP能抓取到目标人物如奥巴马的面部、眉毛、嘴角甚至背景环境的构成,分析他们如何协调运动。接下来,抓取源视频中的同等元素,如测试者自己的动作和表情等视觉信息,安放到奥巴马的脸上。

完成嫁接的视频上,你不止能看到目标人物的身体和脸部动作和测试者一致,甚至连微表情也能同步。凑近看,连人物背后的影子都是重合的。

研究人员将原视频和嫁接视频放在一起比对,发现二者的差异微乎其微。所以,DVP能让任何一个你希望的人出现在镜头中,说一些他从来没说过的话,当然,都是你安排的,用的也是你的声音。这对于电影或电视剧来说太重要了,通过同步演员的表情和声音,可以进一步改善配音电影或电视剧的质量。

Gif:

不过,DVP无法让目标人物做出和测试者在摄像机前的表情相差甚远的表情。比如说,一个人全程垮着脸,系统无法虚构一个咧嘴笑来。目前,DVP还存在一定局限性,大有提升空间。同以往的技术相比,已经有了极大的进步。

论文的联合作者Justus Theis表达了对新技术在道德层面上的担忧。“这也是我们选择公开发表研究结果的原因,让大众了解这项技术的可能性,这一点很重要。”

如果你有意开一家视频取证公司,那么机会来了:用深度学习系统来检测基于深度学习的图像处理会有极大助力。

Truepic:专业照片查证

为了防止出现Deepfakes头不对身的情况,Reddit的Ask Me Anything Q&As开始启用Truepic公司的查证技术,验证广告中的出镜人员是否为本人,通常拍摄者为名人。

Truepic的工作原理通常分为五步:

用Truepic应用获取一张照片;

Truepic验证图像是否已经被更改,并加上时间戳,地理编码,URL和其他元数据作为水印;

Truepic的安全服务器将存储该照片的一个版本,并配备一个六位数的代码和URL,加上一个固定的区块链;

用户可以将他们的Truepic发布到应用程序中,以证明他们不会在约会网站上编造身份,做电商售卖等;

观众可以访问照片上的水印URL,和保存的图片进行比较,以确保在事后没有做过修改。

据了解,Truepic公司获得了800万美元的A轮,投资方包括前道林资本合伙人、前汤森路透CEO Jeffrey Parker,哈佛商学院教授William Sahlman等,他们都不是传统的创投圈人士。事实上,Truepic技术也曾用于查证Tinder和Airbnb的网站图片是否造假,去年5月获得180万美元的种子轮投资。

近几年,假新闻泛滥带来大规模恐慌,加剧了社会的不信任感,而技术,如AI的进步使得造假成本进一步降低,造假的方式却越来越多样。这同时也会催生出更有正面意义技术,如DVP,以及专业的打假查证技术Truepic。你怎么看待这些新技术,有哪些问题需要注意?欢迎在留言区分享你的看法。

编辑 周宏博

免责声明
未经许可或明确书面授权,任何人不得复制、转载、摘编、修改、链接读特客户端内容
推荐阅读

读特热榜

IN视频

鹏友圈

首页