Easy-Wav2Lip数字人一键启动整合包,图片视频都支持
Easy-Wav2Lip新版本已经更新WEB界面Easy-Wav2Lip 改进了 Wav2Lip 视频口型同步,使其速度更快、质量更好
视频使用教程:https://www.bilibili.com/video/BV1Vt42187aW/
视频演示案例:https://www.bilibili.com/video/BV1z6421379m
质量选项:
快速:Wav2Lip
改进:Wav2Lip +在嘴巴周围带有遮罩羽化,去除嘴巴周围边框
增强:Wav2Lip + 遮罩羽化 + GFPGAN 在脸上放大
视频文件:
所有视频帧中必须都有一张脸,否则 Wav2Lip 将报错
剪辑视频中您不想对口型的脸,否则它会随机选择。
使用 h264 .mp4 视频格式
对于你的第一次使用,使用一个非常短的视频测试,当你熟悉的时候,你才应该尝试更大的文件,看看它们是否有效。
音频文件:
另存为.wav,长度与输入视频相同。
音频文件格式 .wav 和.mp3
wav2lip 和 Wav2Lip_GAN优缺点
Wav2Lip
更准确的口型同步
尝试在没有声音时闭上嘴巴 - 有时出现牙齿缺失(不常见)
Wav2Lip_GAN
看起来更好
更保留扬声器的原始表情 - 不善于掩盖原来的嘴唇运动,尤其是在没有声音的情况下
建议您先尝试 Wav2Lip 并切换到Wav2Lip_GAN版本,如果您遇到看起来扬声器牙齿上有很大的间隙的效果。
nosmooth (不平滑):启用后,wav2lip 将独立裁剪每个帧上的脸部。
适用于视频中的快速移动或剪辑。
如果脸部角度奇怪,可能会导致抽搐。
禁用后,wav2lip 会在 5 帧之间混合检测到的人脸位置。
适合缓慢移动,尤其是对于不寻常角度的脸部。
当脸部在画面中快速移动时,嘴巴可能会偏移,在切割之间看起来很可怕。
Padding (填充):
此选项控制在每个方向上从面部裁剪中添加或删除的像素数。
U U = -10
D D = 10 将 10 个像素添加到脸部底部
L L = 0 脸部左侧没有变化
R R = 15 在脸部右侧添加 15 个像素
填充物可以帮助去除下巴或脸部其他边缘的硬线条,但填充物过多或过少都会改变嘴巴的大小或位置。通常的做法是在底部添加 10 个像素,但您应该尝试不同的值,以找到剪辑的最佳平衡。
size 将增加蒙版覆盖的区域的大小。(脸部周围有边框可以减少此数值,例如:1.5)
feathering羽化决定了蒙版中心和边缘之间的混合量。(脸部周围有边框也可以增加此数值 )
mouth_tracking 会将遮罩的位置更新到嘴巴在每一帧上的位置(速度较慢)
注意:由于帧被裁剪到脸上,嘴巴位置已经很近似了,只有当您发现视频的遮罩似乎没有跟随嘴巴时,才启用此功能。
debug_mask 将使背景灰度和蒙版变彩色,以便您可以轻松看到蒙版在框架中的位置。(此参数改成 True 后,可以更直观的看到参数效果)
下载地址:
***本内容需购买可见***
多谢分享 没钱!!!!! 其实每一步都要修改记事本的执行·不算一键启动包吧· 不算一键启动包啊,每一步还要自己操作 感谢分享 dlcranes 发表于 2024-2-6 10:51
不算一键启动包啊,每一步还要自己操作
我看到有一个可以自己在软件来微调不用那么麻烦·还没测试·正在下载·看看效果!我之前那个版本·嘴部只是有个方框· 现在还是脸部那个问题·有框架· :o:o:o:o:o:o 感谢分享