AI换脸能做到实时了!
上周六实时换脸项目deepfacelive终于发布了!它是著名开源换脸项目deepfacelab的兄弟项目,同属一个作者团队开发。基于deepfacelab(以下简称DFL)的做大量工程优化而来的实时换脸项目
有幸参与其中部分工作,写篇教程介绍下的软件用法
软件使用过程,将带货换成刘亦菲
对输入的摄像头视频流,或本地视频文件进行实时AI换脸处理
官方github地址:
https://github.com/iperov/DeepFaceLive
作者提供了自带环境的一体包下载,开箱即用。鉴于国内访问速度,我已搬运至百度盘,
链接:https://pan.baidu.com/s/1B4wKpknWJd1fZn64IvBtWA
提取码:pnjh
已中文汉化,如有翻译错误请联系我修正,软件使用教程
系统要求:WIN10,N卡,并已安装最新驱动。显卡越牛逼帧率越高。支持多卡
安装方式:
下载安装包后直接按提示安装到英文路径。不要使用中文,不然后续识别会出问题
2. 设置虚拟内存至少32GB,具体方式自行百度
3. 运行DeepFaceLive.bat,启动软件
4. 切换语言为中文
4. 选择本地视频作为输入或摄像头输入
5. 依次设置人脸探测器、人脸对齐器、人脸标记器、人脸交换器、帧调节器、人脸融合器。每个选项左键单击可查看详细说明。
7. 点击播放或点击摄像头播放,即可开始实时换脸。机器性能越好,帧率越高。我3080ti跑224分辨率的模型大概能稳定在20-30fps。
其中人脸交换器需要选择一个模型,这个模型需要用deepfacelab训练好的模型,用最新DFL自带的“6) export SAEHD/AMP as dfm.bat"脚本进行格式转化获得。并放置在以下文件夹中DeepFaceLive\userdata\dfm_models
deepfacelab模型的训练和制作是个相当复杂事情,篇幅有限不再展开。需要先学会deepfacelab怎么使用。
新手玩家可以去dfldata.xyz免费学习deepfacelab和deepfacelive的教程,和下载现成模型。
deepfacelive、deepfacelab官方中文交流论坛
dfldata.xyz
这个实时换脸技术可以应用的场景很多,例如
高颜值、会说话的直播带货主播工资很高,借此技术可以聘用颜值一般但会说话的主播来上岗,节省直播公司成本。
担心主播红了自立门户的电商机构,可以统一制作一个形象,让不同主播轮流使用,把主播形象和主播本人进行分离,防止主播单飞导致直播间垮台
声音主播可以带上高颜值形象进行露脸直播,加强观众互动率
同时也会被不法分子用于非法用途,例如
视频诈骗
冒用明星形象进行SQ直播
转载至知乎:https://zhuanlan.zhihu.com/p/394473221