近年来,人们对深度造假(deepfaking)既着迷又担忧。这项技术可以替换视频中的人脸,并利用机器学习使最终生成效果看起来非常逼真。随着深度造假技术越来越先进,一些人因为恶趣味或意图谋取私利而将这项技术应用在侵犯他人权益的领域,如2019年的「一键脱衣」AI DeepNude等。因此,人们开始呼吁限制这类技术的应用。
但并非所有使用深度造假技术的人都怀有恶意,有些人只是想要创建一些有趣的视频。近日,一段有关好莱坞影星汤姆·克鲁斯打高尔夫球的深度造假视频在网络上迅速传播,第一眼看过去,很多人都认为是汤姆·克鲁斯本人。这段视频的创建者为TikTok用户「deeptomcruise」。视频中的「阿汤哥」不仅长得极像,声音也几乎与本尊无异。这不是汤姆·克鲁斯第一次成为deepfake视频的主角,但这次依然让人惊艳。
大家可以先从以下几个片段中判断到底像不像阿汤哥本人:除了打高尔夫球之外,这位TikTok作者还创建了一些其他场景中的「阿汤哥」视频。比如房间里滑倒:又如表演魔术:不过在下面的慢放镜头中,还是可以看到一些瑕疵,比如太阳镜在戴上之前消失了(特别是左镜片)和嘴唇的变化。图源:verge。
虽然存在一些瑕疵,但造假效果已经接近完美。有网友表示:「这是我见过生成效果最逼真的深度造假视频之一,就连声音也非常地接近。」不过,也有人担忧称:「这些极度逼真的深度造假视频也着实令人头疼,我们还怎么相信电视上看到的是本人呢!」
想要观看完整视频的读者,可前往TikTok作者主页:https://www.tiktok.com/@deeptomcruise?「阿汤哥」背后的deepfake技术——DeepFaceLab火爆全网的「阿汤哥」视频使用的技术依然是我们熟悉的DeepFaceLab。
项目地址:https://github.com/iperov/DeepFaceLab/DeepFaceLab是制作deepfake视频时非常常用的软件,该GitHub项目目前已获得近2.4万颗星。DeepFaceLab的特点是灵活、简单、扩展性强,并且具备Windows、Colab、Linux等多个版本。
该软件整合了多项deepfake功能,比如换脸:减龄:施瓦辛格瞬间变年轻。换头:对口型:英女王伊丽莎白二世的圣诞演讲deepfake视频截图。在这个视频中,「女王」甚至跳了一段舞蹈。去年5月,该项目作者Ivan Perov等人撰写了相关论文,详细介绍了这一deepfake神器。
论文链接:https://arxiv.org/pdf/2005.05535.pdf据介绍,DeepFaceLab的pipeline包含三个主要部分:提取、训练和转换。第一步:提取。这部分包含多种算法和处理部分,如人脸检测、人脸对齐和人脸分割。下图展示了「提取」步骤的流程:第二步:训练。这是DeepFaceLab实现逼真换脸效果的最关键步骤,具体步骤参见下图:第三步:转换。
该步骤的过程参见下图:此外,为了提高生产效率,DeepFaceLab还包括多种生产工具,如「提取」步中的手动人脸识别与人脸关键点提取工具(下图a)、XSeg手动人脸分割编辑器(下图b)。
目前,DeepFaceLab项目发布了多个版本和教程,感兴趣的读者可以自行尝试。
参考链接:https://www.theverge.com/22303756/tiktok-tom-cruise-impersonator-deepfakehttps://www.dexerto.com/entertainment/insanely-accurate-tom-cruise-deepfake-goes-viral-on-tiktok-1521789/点击阅读原文,查看更多精彩!
喜欢本篇内容,请分享、点赞、在看阅读原文