社区所有版块导航
Python
python开源   Django   Python   DjangoApp   pycharm  
DATA
docker   Elasticsearch  
aigc
aigc   chatgpt  
WEB开发
linux   MongoDB   Redis   DATABASE   NGINX   其他Web框架   web工具   zookeeper   tornado   NoSql   Bootstrap   js   peewee   Git   bottle   IE   MQ   Jquery  
机器学习
机器学习算法  
Python88.com
反馈   公告   社区推广  
产品
短视频  
印度
印度  
Py学习  »  Git

GitHub 热榜:这竟然不是阿汤哥?这个「真的吓人」视频火爆全网

开源最前线 • 3 年前 • 334 次点击  

本文经机器之心(微信公众号:almosthuman2014)授权转载,禁止二次转载


好莱坞影星「阿汤哥」又一次成为深度造假视频的主角。


近年来,人们对深度造假(deepfaking)既着迷又担忧。这项技术可以替换视频中的人脸,并利用机器学习使最终生成效果看起来非常逼真。

随着深度造假技术越来越先进,一些人因为恶趣味或意图谋取私利而将这项技术应用在侵犯他人权益的领域,如 2019 年的「一键脱衣」AI DeepNude 等。因此,人们开始呼吁限制这类技术的应用。

但并非所有使用深度造假技术的人都怀有恶意,有些人只是想要创建一些有趣的视频。近日,一段有关好莱坞影星汤姆・克鲁斯打高尔夫球的深度造假视频在网络上迅速传播,第一眼看过去,很多人都认为是汤姆・克鲁斯本人。这段视频的创建者为 TikTok 用户「deeptomcruise」。视频中的「阿汤哥」不仅长得极像,声音也几乎与本尊无异。这不是汤姆・克鲁斯第一次成为 deepfake 视频的主角,但这次依然让人惊艳。

大家可以先从以下几个片段中判断到底像不像阿汤哥本人:










除了打高尔夫球之外,这位 TikTok 作者还创建了一些其他场景中的「阿汤哥」视频。比如房间里滑倒:




又如表演魔术:




不过在下面的慢放镜头中,还是可以看到一些瑕疵,比如太阳镜在戴上之前消失了(特别是左镜片)和嘴唇的变化。



图源:verge。

虽然存在一些瑕疵,但造假效果已经接近完美。有网友表示:「这是我见过生成效果最逼真的深度造假视频之一,就连声音也非常地接近。」不过,也有人担忧称:「这些极度逼真的深度造假视频也着实令人头疼,我们还怎么相信电视上看到的是本人呢!」

想要观看完整视频的读者,可前往 TikTok 作者主页:
https://www.tiktok.com/@deeptomcruise?

「阿汤哥」背后的 deepfake 技术 ——DeepFaceLab

火爆全网的「阿汤哥」视频使用的技术依然是我们熟悉的 DeepFaceLab。




 项目地址:https://github.com/iperov/DeepFaceLab/

DeepFaceLab 是制作 deepfake 视频时非常常用的软件,该 GitHub 项目目前已获得近 2.4 万颗星。DeepFaceLab 的特点是灵活、简单、扩展性强,并且具备 Windows、Colab、Linux 等多个版本。




该软件整合了多项 deepfake 功能,比如换脸:




减龄:



施瓦辛格瞬间变年轻。

换头:




 对口型:



英女王伊丽莎白二世的圣诞演讲 deepfake 视频截图。在这个视频中,「女王」甚至跳了一段舞蹈。

去年 5 月,该项目作者 Ivan Perov 等人撰写了相关论文,详细介绍了这一 deepfake 神器。




论文链接:https://arxiv.org/pdf/2005.05535.pdf

据介绍,DeepFaceLab 的 pipeline 包含三个主要部分:提取、训练和转换。

第一步:提取。这部分包含多种算法和处理部分,如人脸检测、人脸对齐和人脸分割。下图展示了「提取」步骤的流程:




第二步:训练。这是 DeepFaceLab 实现逼真换脸效果的最关键步骤,具体步骤参见下图:




第三步:转换。该步骤的过程参见下图:



此外,为了提高生产效率,DeepFaceLab 还包括多种生产工具,如「提取」步中的手动人脸识别与人脸关键点提取工具(下图 a)、XSeg 手动人脸分割编辑器(下图 b)。


目前,DeepFaceLab 项目发布了多个版本和教程,感兴趣的读者可以自行尝试。

参考链接:
https://www.theverge.com/22303756/tiktok-tom-cruise-impersonator-deepfake
https://www.dexerto.com/entertainment/insanely-accurate-tom-cruise-deepfake-goes-viral-on-tiktok-1521789/




Python社区是高质量的Python/Django开发社区
本文地址:http://www.python88.com/topic/108766
 
334 次点击