a8391279 发表于 2024-5-24 23:46:59

新人想问deepfacelab的遮罩问题!

大佬分享了个1800w的万能遮罩,不知道怎么使用,请问是需要先手绘遮罩,再用5.XSeg) train.bat这个训练;还是直接跳过前面2步的手绘,直接用7)merge SAEHD.bat按X选遮罩类型阿?:(

meiyouruguo 发表于 2024-5-25 08:49:33

使用 Xseg 模型实际上有两种使用方式


一种是在换脸模型训练前先把遮罩给推理出来,应用到训练素材中。
另一种是合成时实时生成遮罩并预览。


第一种方式就是使用 5.XSeg) data_src trained mask - apply.bat 脚本(dst 同理),把遮罩提前生成并写入图片信息中。这样在换脸模型训练阶段就能只针对重点区域进行学习,不去学习什么口红啊,头发啊,略微能提升点质量。但个人不推荐这种方式,因为推理出来的遮罩不一定完美,如果有瑕疵就会影响训练效果。


建议使用第二种方式,在合成 merge 阶段,在交互预览窗口直接按 X 来实时计算遮罩,因为方便观察遮罩效果。X 可以多按几次,有多个遮罩使用模式,总有一款会适合你




Xseg 模型的复用


最后讲下 Xseg 模型的重复使用


Xseg 模型不需要每次素材都重新训练一份,可以在同一份模型基础上加入更多素材继续训练,让模型能处理的遮罩越来越牛逼


每次手工画完的遮罩图不要删,用 5.XSeg) data_dst mask for XSeg trainer - fetch.bat 脚本集中搜集起来,下次有新素材可以加入一块训练

jandown 发表于 2024-5-27 21:05:49

meiyouruguo 发表于 2024-5-25 08:49
使用 Xseg 模型实际上有两种使用方式




大佬有遮罩素材吗?

HHHH12138 发表于 2024-5-29 21:29:55

我这里有万能遮罩,需要我发
页: [1]
查看完整版本: 新人想问deepfacelab的遮罩问题!