AIBL论坛

 找回密码
 立即注册
本论坛所有软件旨在帮助用户创建逼真且有趣的内容,帮助做自媒体的人制作原创有趣的视频或广告,如果使用别人的肖像,使用之前需获得同意和许可(建议使用AI生成的人脸),严禁使用软件制作任何不正规视频,如发现用于不正规用途,一律删号处理
查看: 6697|回复: 40

Easy-Wav2Lip数字人一键启动整合包,图片视频都支持

[复制链接]
发表于 2024-2-4 19:47:07 | 显示全部楼层 |阅读模式
Easy-Wav2Lip新版本已经更新WEB界面

1.jpg
Easy-Wav2Lip 改进了 Wav2Lip 视频口型同步,使其速度更快、质量更好

视频使用教程:https://www.bilibili.com/video/BV1Vt42187aW/
视频演示案例:https://www.bilibili.com/video/BV1z6421379m
质量选项

快速:Wav2Lip
改进:Wav2Lip +在嘴巴周围带有遮罩羽化,去除嘴巴周围边框
增强:Wav2Lip + 遮罩羽化 + GFPGAN 在脸上放大

视频文件
所有
视频帧中必须都有一张脸,否则 Wav2Lip 将报错
剪辑视频中您不想对口型的脸,否则它会随机选择。
使用 h264 .mp4 视频格式
对于你的第一次使用,使用一个非常短的视频测试,当你熟悉的时候,你才应该尝试更大的文件,看看它们是否有效。

音频文件
另存为.wav,长度与输入视频相同。
音频文件格式   .wav 和.mp3

wav2lip 和 Wav2Lip_GAN优缺点

Wav2Lip                       
更准确的口型同步
尝试在没有声音时闭上嘴巴        - 有时出现牙齿缺失(不常见)

Wav2Lip_GAN        
看起来更好
更保留扬声器的原始表情        - 不善于掩盖原来的嘴唇运动,尤其是在没有声音的情况下


建议您先尝试 Wav2Lip 并切换到Wav2Lip_GAN版本,如果您遇到看起来扬声器牙齿上有很大的间隙的效果。

nosmooth (不平滑):启用后,wav2lip 将独立裁剪每个帧上的脸部。
适用于视频中的快速移动或剪辑。
如果脸部角度奇怪,可能会导致抽搐。
禁用后,wav2lip 会在 5 帧之间混合检测到的人脸位置。
适合缓慢移动,尤其是对于不寻常角度的脸部。
当脸部在画面中快速移动时,嘴巴可能会偏移,在切割之间看起来很可怕。

Padding (填充)
此选项控制在每个方向上从面部裁剪中添加或删除的像素数。

U        U = -10      
D        D = 10        将 10 个像素添加到脸部底部
L        L = 0           脸部左侧没有变化
R        R = 15        在脸部右侧添加 15 个像素


填充物可以帮助去除下巴或脸部其他边缘的硬线条,但填充物过多或过少都会改变嘴巴的大小或位置。通常的做法是在底部添加 10 个像素,但您应该尝试不同的值,以找到剪辑的最佳平衡。



size 将增加蒙版覆盖的区域的大小。(脸部周围有边框可以减少此数值,例如:1.5)
feathering  羽化决定了蒙版中心和边缘之间的混合量。(脸部周围有边框也可以增加此数值
mouth_tracking 会将遮罩的位置更新到嘴巴在每一帧上的位置(速度较慢)
注意:由于帧被裁剪到脸上,嘴巴位置已经很近似了,只有当您发现视频的遮罩似乎没有跟随嘴巴时,才启用此功能。
debug_mask 将使背景灰度和蒙版变彩色,以便您可以轻松看到蒙版在框架中的位置。此参数改成 True 后,可以更直观的看到参数效果


下载地址:
付费内容
亲爱的游客您好!如果您要查看本帖隐藏内容请向楼主支付49灵石









AIBL论坛免责申明
本论坛刊载的所有内容,包括图片、软件、模型等均在网上搜集。
论坛提供的内容仅用于个人学习、研究或欣赏。我们不保证内容的正确性。通过使用本站内容随之而来的风险与本站无关
访问者可将本网站提供的内容或服务用于个人学习、研究或欣赏,以及其他非商业性或非盈利性用途,但同时应遵守著作权法及其他相关法律的规定,不得侵犯本网站及相关权利人的合法权利。
本网站内容原作者如不愿意在本网站刊登内容,请及时通知本站,予以删除。

6

主题

90

回帖

818

积分

中级丹师

积分
818
发表于 2024-2-5 17:00:58 来自手机 | 显示全部楼层
多谢分享
回复

使用道具 举报

3

主题

1

回帖

175

积分

高级丹童

积分
175
发表于 2024-2-5 21:59:56 | 显示全部楼层
没钱!!!!!
回复

使用道具 举报

1

主题

15

回帖

56

积分

中级丹童

积分
56
发表于 2024-2-6 04:08:44 | 显示全部楼层
其实每一步都要修改记事本的执行·不算一键启动包吧·
回复

使用道具 举报

0

主题

3

回帖

3

积分

初级丹童

积分
3
发表于 2024-2-6 10:51:40 | 显示全部楼层
不算一键启动包啊,每一步还要自己操作
回复

使用道具 举报

0

主题

12

回帖

368

积分

初级丹师

积分
368
发表于 2024-2-6 20:54:48 | 显示全部楼层
感谢分享
回复

使用道具 举报

1

主题

15

回帖

56

积分

中级丹童

积分
56
发表于 2024-2-7 03:10:30 | 显示全部楼层
dlcranes 发表于 2024-2-6 10:51
不算一键启动包啊,每一步还要自己操作

我看到有一个可以自己在软件来微调不用那么麻烦·还没测试·正在下载·看看效果!我之前那个版本·嘴部只是有个方框·
回复

使用道具 举报

1

主题

15

回帖

56

积分

中级丹童

积分
56
发表于 2024-2-8 02:53:26 | 显示全部楼层
现在还是脸部那个问题·有框架·

点评

feathering改成15或20,还可以修改size改成1.5或者1,这两个参数都可以去除脸部周围边框  发表于 2024-2-8 10:01
回复

使用道具 举报

0

主题

1

回帖

12

积分

初级丹童

积分
12
发表于 2024-2-11 18:07:15 | 显示全部楼层
回复

使用道具 举报

0

主题

2

回帖

16

积分

初级丹童

积分
16
发表于 2024-2-15 12:53:47 | 显示全部楼层
感谢分享
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|AIBL论坛

GMT+8, 2024-9-8 10:26 , Processed in 0.117828 second(s), 27 queries , Gzip On.

Powered by AI技术论坛 X3.5

© 2001-2023 dfl论坛

快速回复 返回顶部 返回列表