MyHeyGen-平民版开源视频翻译工具视频唇纹合成全流程解决方案

文章目录
显示

MyHeyGen

MyHeyGen是一个平民版开源视频翻译工具，包括音频翻译，翻译校正，视频唇纹合成全流程解决方案，不过并不是开箱即用的，需要一点点技术，想要准备所需要的环境，然后在安装，不过作者提供了视频操作教程，感兴趣的同学可以到项目围观学习。

GitHub：https://github.com/AIFSH/MyHeyGen

视频教程

环境准备

在huggingface申请token,放在config.json的HF_TOKEN参数下
在百度翻译申请APPKey用于翻译字幕放在config.json的TS_APPID和TS_APPKEY参数下
下载weights drive 夸克放在MyHeyGen目录下，下载checkpoints drive 夸克放在video-retalking目录下,从weights复制GFPGANv1.4.pth到checkpoints，如下图

安装

git clone https://github.com/AIFSH/MyHeyGen.git
cd MyHeyGen
bash install.sh

或者拉取docker镜像

docker pull registry.cn-beijing.aliyuncs.com/codewithgpu2/aifsh-myheygen:o3U7yjrWg5

测试

python translate.py /root/MyHeyGen/test/src.mp4 'zh-cn' -o /root/MyHeyGen/test/out_zh.mp4

自己使用

python translate.py 原视频文件路径 想要翻译成的语言代码 -o 翻译好的视频路径
## 语言代码可以选择这些中之一：['en', 'es', 'fr', 'de', 'it', 'pt', 'pl', 'tr', 'ru', 'nl', 'cs', 'ar', 'zh-cn', 'ja','hu','ko']
##分别对应[英语、西班牙语、法语、德语、意大利语、葡萄牙语、波兰语、土耳其语、俄语、荷兰语、捷克语、阿拉伯语、中文（简体）、日语、匈牙利语、韩语]16种语言