自动唇同步项目lazykh使用教程

1. 项目介绍

本项目是基于开源库gentle的自动唇同步项目，名为lazykh。它能够根据音频文件和脚本文件自动生成动画角色的口型，实现简单的唇同步效果。此项目适用于需要为视频中的角色添加口型的创作者，尤其适合制作教学视频、游戏解说等。

2. 项目快速启动

快速启动lazykh项目需要以下步骤：

安装环境

首先，首先确保你的系统中安装了Python 3。

sudo pip install Twisted==16.4.1

然后从GitHub克隆lazykh项目：

git clone https://github.com/carykh/lazykh.git

进入项目目录，安装gentle库：

cd gentle
./install.sh

注意：gentle库安装后体积较大，约为3GB。

准备音频和脚本

将音频文件和脚本文件放入lazykh/exampleVideo目录中，音频文件应为.wav格式，脚本文件为.txt格式。

处理脚本

运行以下命令去除脚本中的注释，使其适应gentle库处理：

python3 code/gentleScriptWriter.py --input_file exampleVideo/ev

生成口型数据

使用gentle库为音频文件生成口型时间戳：

python3 gentle-final/align.py exampleVideo/ev.wav exampleVideo/ev_g.txt -o exampleVideo/ev.json

创建时间表

生成动画的时间表：

python3 code/makeSchedule.py --input_file exampleVideo/ev.json --output_file exampleVideo/ev_schedule.json

3. 应用案例和最佳实践

应用案例

• 制作教学视频，为旁白添加口型。
• 游戏解说视频，让游戏角色根据解说同步口型。

最佳实践

• 在脚本中使用通用的单词代替不常见的单词，以便gentle库能够识别并同步口型。
• 在脚本中适当使用情感标签，如<happy>，<sad>，以使角色表情更加丰富。

4. 典型生态项目

目前lazykh作为一个开源项目，已经有了一些典型的生态项目，包括但不限于：

• 使用lazykh进行视频创作的个人项目。
• 集成lazykh的自动化视频生产工具。

通过上述教程，您可以开始使用lazykh进行视频创作。祝您创作愉快！