meiyouruguo 发表于 2024-2-4 19:47:07

Easy-Wav2Lip数字人一键启动整合包,图片视频都支持

Easy-Wav2Lip新版本已经更新WEB界面


Easy-Wav2Lip 改进了 Wav2Lip 视频口型同步,使其速度更快、质量更好

视频使用教程:https://www.bilibili.com/video/BV1Vt42187aW/
视频演示案例:https://www.bilibili.com/video/BV1z6421379m
质量选项:
快速:Wav2Lip
改进:Wav2Lip +在嘴巴周围带有遮罩羽化,去除嘴巴周围边框
增强:Wav2Lip + 遮罩羽化 + GFPGAN 在脸上放大

视频文件:
所有视频帧中必须都有一张脸,否则 Wav2Lip 将报错
剪辑视频中您不想对口型的脸,否则它会随机选择。
使用 h264 .mp4 视频格式
对于你的第一次使用,使用一个非常短的视频测试,当你熟悉的时候,你才应该尝试更大的文件,看看它们是否有效。

音频文件:
另存为.wav,长度与输入视频相同。
音频文件格式   .wav 和.mp3

wav2lip 和 Wav2Lip_GAN优缺点

Wav2Lip                     
更准确的口型同步
尝试在没有声音时闭上嘴巴      - 有时出现牙齿缺失(不常见)

Wav2Lip_GAN      
看起来更好
更保留扬声器的原始表情      - 不善于掩盖原来的嘴唇运动,尤其是在没有声音的情况下

建议您先尝试 Wav2Lip 并切换到Wav2Lip_GAN版本,如果您遇到看起来扬声器牙齿上有很大的间隙的效果。

nosmooth (不平滑):启用后,wav2lip 将独立裁剪每个帧上的脸部。
适用于视频中的快速移动或剪辑。
如果脸部角度奇怪,可能会导致抽搐。
禁用后,wav2lip 会在 5 帧之间混合检测到的人脸位置。
适合缓慢移动,尤其是对于不寻常角度的脸部。
当脸部在画面中快速移动时,嘴巴可能会偏移,在切割之间看起来很可怕。

Padding (填充):
此选项控制在每个方向上从面部裁剪中添加或删除的像素数。

U      U = -10      
D      D = 10      将 10 个像素添加到脸部底部
L      L = 0         脸部左侧没有变化
R      R = 15      在脸部右侧添加 15 个像素

填充物可以帮助去除下巴或脸部其他边缘的硬线条,但填充物过多或过少都会改变嘴巴的大小或位置。通常的做法是在底部添加 10 个像素,但您应该尝试不同的值,以找到剪辑的最佳平衡。


size 将增加蒙版覆盖的区域的大小。(脸部周围有边框可以减少此数值,例如:1.5)
feathering羽化决定了蒙版中心和边缘之间的混合量。(脸部周围有边框也可以增加此数值 )
mouth_tracking 会将遮罩的位置更新到嘴巴在每一帧上的位置(速度较慢)
注意:由于帧被裁剪到脸上,嘴巴位置已经很近似了,只有当您发现视频的遮罩似乎没有跟随嘴巴时,才启用此功能。
debug_mask 将使背景灰度和蒙版变彩色,以便您可以轻松看到蒙版在框架中的位置。(此参数改成 True 后,可以更直观的看到参数效果)


下载地址:
***本内容需购买可见***








cjlljc 发表于 2024-2-5 17:00:58

多谢分享

kai009com 发表于 2024-2-5 21:59:56

没钱!!!!!

gnchong 发表于 2024-2-6 04:08:44

其实每一步都要修改记事本的执行·不算一键启动包吧·

dlcranes 发表于 2024-2-6 10:51:40

不算一键启动包啊,每一步还要自己操作

QAINK 发表于 2024-2-6 20:54:48

感谢分享

gnchong 发表于 2024-2-7 03:10:30

dlcranes 发表于 2024-2-6 10:51
不算一键启动包啊,每一步还要自己操作

我看到有一个可以自己在软件来微调不用那么麻烦·还没测试·正在下载·看看效果!我之前那个版本·嘴部只是有个方框·

gnchong 发表于 2024-2-8 02:53:26

现在还是脸部那个问题·有框架·

243880332 发表于 2024-2-11 18:07:15

:o:o:o:o:o:o

sancy61 发表于 2024-2-15 12:53:47

感谢分享
页: [1] 2 3 4 5
查看完整版本: Easy-Wav2Lip数字人一键启动整合包,图片视频都支持