meiyouruguo 发表于 2023-10-13 09:35:30

一张图片给视频换脸不开高清修复人脸模糊的原因

roop及其所有分支facefusion、rope、roop-unleashed等一张图片换脸工具都使用了InsightFace中相同的出色人脸交换器模型。该模型完成了将面部从一个粘贴到另一个的所有基础工作,我们都或多或少地将其视为黑匣子。现在这个模型最初是作为开源发布的,但是当他们开发更好的版本并开始在其上创建业务时,他们删除了原始模型的所有痕迹,并将更好的模型隐藏在付费墙后面。你可以在这里阅读https://github.com/deepinsight/insightface,目前我们使用的模型在 128x128 像素的模型。

对于128x128 分辨率,无疑分辨率是很低的,在低分辨率下进行换脸,交换后看起来确实很模糊

但是,insightface已经训练开发了256x256 和 512x512分辨率的模型,但是模型需要付费,目前并不开源, 这就是为什么包括roop及其分支(一张图片就可以换脸的工具)添加了交换后的高清修复功能,以解决这一模糊问题。这就是为什么未触及的图像在低质量或分辨率下看起来更好的原因,但是开启高清修复会占用大量显存,并且人脸相似度也会降低。

roop还可以用于直播,一张图片就可以换脸直播,不开高清修复的情况下可以8G显存就可以流畅的运行,如果 256x256 和 512x512分辨率的模型开源,那不敢想象未来的直播间一大群换脸造假的人在直播。

随着ai换脸的发展,未来的发展趋势是,视频看到的(这里包括可视电话)并不一定是真的,谨防欺诈行为,以前常说照片是P的,现在常说视频是AI制作的,都是假的

最后,技术发展是用来提高生产力,而不是伤害或欺骗,不要用AI做一些不符合法律法规的事情。




liqianjie 发表于 2023-10-14 13:48:57

签到领石头

elgty 发表于 2023-10-15 09:10:09

签到领灵石

yang67 发表于 2023-10-16 08:52:23

学习了,谢谢分享。

stars 发表于 2023-10-16 19:35:25

签到领灵石.签到

zk5221580 发表于 2023-10-16 20:41:52

签到领灵石~~~

bbyl001 发表于 2023-10-17 06:42:24

签到领石头

ljp11111 发表于 2023-10-17 07:15:45

谢谢楼主分享

cn02466282 发表于 2023-10-17 16:54:30

签到领灵石

ewosun 发表于 2023-10-17 23:47:12

签订领灵石
页: [1] 2
查看完整版本: 一张图片给视频换脸不开高清修复人脸模糊的原因