平民开源视频翻译神器:MyHeyGen全流程解决方案详解

MyHeyGen是一款平民版开源视频翻译工具,提供音频翻译、字幕校正及视频唇纹合成全流程解决方案。本文将详细介绍其使用方法、环境准备、安装步骤以及如何进行视频翻译。

3AI工具视频翻译开源工具唇纹合成AI技术

MyHeyGen简介

MyHeyGen是一款专为普通用户设计的开源视频翻译工具,它不仅支持音频翻译和字幕校正,还能实现视频唇纹合成,整个过程无需额外技术支持。作者还提供了详细的视频操作教程,方便用户学习和使用。

weights文件目录

项目地址

想要了解更多关于MyHeyGen的信息,可以访问其GitHub项目:MyHeyGen GitHub

weights文件目录

视频教程

如果您对MyHeyGen的使用感兴趣,可以观看以下视频教程:MyHeyGen视频教程

checkpoints文件目录

环境准备

  • huggingface申请token,并放置在config.json的HF_TOKEN参数下。
  • 百度翻译申请APPKey,用于翻译字幕,并放置在config.json的TS_APPID和TS_APPKEY参数下。
  • 下载weights和checkpoints文件,分别放置在MyHeyGen目录下和video-retalking目录下,并将GFPGANv1.4.pth文件复制到checkpoints目录下。

安装

git clone https://github.com/AIFSH/MyHeyGen.git cd MyHeyGen bash install.sh

或者拉取docker镜像:

checkpoints文件目录

docker pull registry.cn-beijing.aliyuncs.com/codewithgpu2/aifsh-myheygen:o3U7yjrWg5

测试

python translate.py /root/MyHeyGen/test/src.mp4 'zh-cn' -o /root/MyHeyGen/test/out_zh.mp4

自己使用

python translate.py 原视频文件路径 想要翻译成的语言代码 -o 翻译好的视频路径

其他视频翻译工具

如果您对其他视频翻译工具感兴趣,可以访问以下链接:

  • Sync labs-视频与任何语言实时口型同步AI工具 唇型同步
  • 更多视频翻译工具