ToB企服应用市场:ToB评测及商务社交产业平台

标题: FaceFormer嘴形同步论文复现 [打印本页]

作者: 张春    时间: 2024-8-31 06:17
标题: FaceFormer嘴形同步论文复现
一、项目地点

https://github.com/EvelynFan/FaceFormer
二、复现过程

1、项目环境

系统:Ubuntu 18.04.1
python版本:Python 3.7
使用conda创建一个虚拟环境,安装requirements.txt中所需要的库
2、安装ffmpeg

教程网址:https://blog.csdn.net/m0_56454119/article/details/138190685
3、安装MPI-IS/mesh

项目地点:https://github.com/MPI-IS/mesh
(1)将项目下载下来,放进FaceFormer工程项目中

(2)根据项目文档,安装需要的内容

(3)安装乐成显示

4、下载预练习好的模子

下载网址:https://drive.google.com/drive/folders/1_XVYnBcca-8wD-zqAcaNKxwugBKn7hJe?usp=sharing
5、下载wav2vec的离线模子

下载网站:https://huggingface.co/facebook/wav2vec2-base-960h/tree/main
存放路径:

6、举行测试


官方是用gpu举行练习的,本人的gpu不够强大,练习不了,就换成了cpu
  1. python demo.py --model_name biwi --wav_path "demo/wav/test.wav" --dataset BIWI --vertice_dim 70110 --feature_dim 128 --period 25 --fps 25 --train_subjects "F2 F3 F4 M3 M4 M5" --test_subjects "F1 F5 F6 F7 F8 M1 M2 M6" --condition M3 --subject M1 --device cpu
复制代码
三、最终结果


     FaceFormer嘴形同步复现结果
  

免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。




欢迎光临 ToB企服应用市场:ToB评测及商务社交产业平台 (https://dis.qidao123.com/) Powered by Discuz! X3.4