在上一篇文章中,咱们探讨了如何运用LoRA模型和Adetailer插件来完结换脸作用,到达了与斯嘉丽本人极高的类似度。如果您对练习真人LoRA模型感兴趣,欢迎回顾我之前的文章。

超高类似度换脸:IP-Adapter+Instant-ID一同上

尽管LoRA模型的作用杰出,但其练习进程较为杂乱。因而,本篇文章将向您介绍一种无需LoRA即可完结高类似度换脸的方法。我运用这种方法得到的换脸作用尽管相较于LoRA有微小的下降,但全体体现依然超卓。

超高类似度换脸:IP-Adapter+Instant-ID一同上

众所周知,ControlNet中的IP-Adapter和Instant-ID可以用于换脸,但有时它们的类似度不够高。我将介绍的方法结合了这两者的优势,比独自运用它们可以获得更高的人脸类似度。

如果你喜爱看视频教程,那么我十分欢迎你观看本文所对应的视频(B站同名帐号):

www.bilibili.com/video/BV1iK…

别的,我在这个云渠道上运转SD,引荐一下:

myaiforce.com.cn/lanrui/

WebUI Forge的介绍

本篇文章将运用WebUI的进阶版别——WebUI Forge。比较于旧版WebUI,WebUI Forge在性能上有显著提高,乃至超过了ComfyUI,并增加了许多有用的新功用。例如,ControlNet引入了新版的IP-Adapter,预处理器也有所不同。

超高类似度换脸:IP-Adapter+Instant-ID一同上

Instant-ID的预处理器也跟老版别的WebUI里的不一样。

超高类似度换脸:IP-Adapter+Instant-ID一同上

这些改变是咱们挑选WebUI Forge的原因之一。我发现,在老版别的WebUI中同时运用IP-Adapter和Instant-ID的作用十分差。

要装置WebUI Forge的话,可以拜访其GitHub主页(github.com/lllyasviel/…)。上面有具体的装置进程。

超高类似度换脸:IP-Adapter+Instant-ID一同上

我为咱们下载了一键装置包。下载地址是pan.baidu.com/s/1HGp5eYb-…

解压之后,运用run.bat这个文件来运转,运用update.bat这个文件来更新。坚持更新很重要,可以避免老版别的Bug。

换脸基础设置

1️⃣挑选SDXL底模

首要,翻开WebUI Forge的界面,咱们需求选定一个SDXL的底模作为咱们的起点。挑选SDXL模型是由于Instant-ID当时仅对此模型供给支撑,确保了咱们可以运用最新技能完结换脸。

2️⃣部分制作和上传相片

接着,进入到图生图的界面,并挑选“部分制作”选项。这一进程是准备将咱们想要进行换脸的相片上传至渠道。上传相片后,涂抹脸部区域以指定即将替换的部分。记得,涂抹的区域应略大于实践的脸部区域,以便咱们有满足的空间调整人物的脸型,这是一个关键进程,确保终究作用的自然和谐。

超高类似度换脸:IP-Adapter+Instant-ID一同上

3️⃣调整蒙版含糊度和运用Soft Inpainting

完结脸部区域的标记后,翻滚到页面下方进行进一步的设置:

  • 蒙版含糊度: 稍微增加蒙版含糊度,这样可以有用防止换脸后边际出现明显的接缝,提高终究作用的自然度。
  • Soft Inpainting: 勾选“Soft Inpainting”选项。这是WebUI Forge供给的一个新功用,它可以柔化边际,避免在重绘进程中发生接缝,是提高换脸质量的重要东西。

超高类似度换脸:IP-Adapter+Instant-ID一同上

4️⃣填写提示词和挑选采样器

  • 提示词: 填写描述脸部区域的提示词,这将协助模型更好地理解咱们的换脸需求。
  • 采样器挑选: 仔细挑选一个合适的采样器。不同的采样器或许会对换脸作用发生显著影响。如果发现选定的采样器生成的图片作用欠安,不妨测验替换采样器。

5️⃣调整宽高和重绘强度

最后,点击“三角尺”图标自动将宽高设置为原图尺寸,以坚持图画比例的一致性。同时,恰当调低“重绘强度”以确保换脸后的脸部与原图可以自然衔接。重绘强度设置过高或许导致不自然的作用,因而,依据生成的图画再做微调是十分必要的。

超高类似度换脸:IP-Adapter+Instant-ID一同上

在成功装置并进入WebUI Forge界面后,接下来的进程是装备ControlNet以完结准确的换脸作用。ControlNet的设置是核心进程之一,涉及到IP-Adapter和Instant-ID的运用。这部分指南将具体介绍如何正确装备ControlNet以及相关组件。

设置第一个ControlNet(运用IP-Adapter)

1️⃣启用ControlNet: 首要,打开“ControlNet Integrated”选项,并启用第一个ControlNet。

2️⃣挑选IP-Adapter: 在ControlNet装备中,挑选IP-Adapter作为东西。预处理器和模型应已预设挑选,无需进一步装备。如果你没有这个模型的话,可以看看我之前介绍IP-Adapter的文章

3️⃣上传控制图画: 勾选“Upload independent control image”并上传一张斯嘉丽的大头照作为参考。挑选恰当的头像至关重要,由于不同的头像或许会直接影响换脸作用的质量和准确性。

超高类似度换脸:IP-Adapter+Instant-ID一同上

4️⃣调整权重: 向下翻滚并恰当调整权重。需求留意的是,没有固定的权重设置规范,需求依据具体情况和作用进行调整。

超高类似度换脸:IP-Adapter+Instant-ID一同上

5️⃣增加LoRA提示词: 在提示词区域增加LoRA,以配合IP-Adapter运用。尽管这对终究作用的影响不大,但恰当的调整可以微调细节。

超高类似度换脸:IP-Adapter+Instant-ID一同上

设置第二和第三个ControlNet(运用Instant-ID)

持续设置第二个和第三个ControlNet,这些进程是为了运用Instant-ID技能优化换脸作用。这部分装备关键在于下载和装置正确的模型,以及准确地调整设置以习惯特定的换脸需求。

下载和装置Instant-ID模型

1️⃣拜访GitHub页面: 一切必要的模型下载链接和装置指南都可以在指定的GitHub页面(github.com/Mikubill/sd…)上找到。这些信息供给了具体进程,确保用户可以顺利进行装备。

2️⃣下载模型: 依据链接直接下载所需的Instant-ID模型。或许,拜访我供给的度盘链接:pan.baidu.com/s/1dfX4v9O1…

超高类似度换脸:IP-Adapter+Instant-ID一同上

3️⃣模型重命名与放置:

  • 将下载得到的第一个模型重命名为ip-adapter_instant_id_sdxl
  • 第二个模型重命名为control_instant_id_sdxl
  • 确保将这些模型文件放置在WebUI Forge的根目录下的models/ControlNet文件夹中。

设置第二个ControlNet

1️⃣启用ControlNet: 在WebUI Forge界面中,打开第二个ControlNet的设置,并勾选启用。

2️⃣装备选项:

  • 控制网络类型: 挑选”Instant-ID”。
  • 预处理器: 挑选instant_id_face_keypoints,它专门用于辨认人脸的五个关键点,这关于准确的脸部特征匹配至关重要。
  • 模型: 挑选control_instant_id_sdxl,这是之前下载和重命名的模型。

超高类似度换脸:IP-Adapter+Instant-ID一同上

设置第三个ControlNet

1️⃣预处理器挑选: 挑选InsightFace (Instant-ID),这是另一种用于辨认脸部特征的预处理器。

2️⃣模型挑选: 此处挑选ip-adapter_instant_id_sdxl模型,确保与第二个ControlNet的装备彼此弥补。

3️⃣上传不同的头像: 为了运用IP-Adapter和Instant-ID的组合优势,上传一张与第一个ControlNet不同的斯嘉丽大头照,这样可以在不同的控制网络中运用不同的脸部特征,以到达更准确的作用。

4️⃣权重调整: 权重的调整没有固定规范,应依据生成的图画作用进行恰当调整。这一步是试错进程的一部分,旨在找到最佳的设置组合,以完结尽或许自然和准确的换脸作用。

超高类似度换脸:IP-Adapter+Instant-ID一同上

经过这些进程,您可以运用WebUI Forge中的高档功用和ControlNet技能,完结高度准确的换脸作用。重要的是要细心调整每个设置,并依据需求进行恰当的试错,以确保终究作用满足您的要求。

运转与优化

1️⃣发动进程: 承认一切设置正确无误后,开始运转换脸进程。这或许需求一段时间,由于体系需求顺次运转三个ControlNet。

2️⃣检查终端: 在此进程中,定期检查终端以承认是否有任何错误信息。这可以协助及时发现并解决或许出现的问题。

超高类似度换脸:IP-Adapter+Instant-ID一同上

3️⃣检查成果: 一旦图画生成完结,回到WebUI界面检查。

超高类似度换脸:IP-Adapter+Instant-ID一同上

结语

经过细致的优化和调整,您将可以完结高度类似且自然的换脸作用。WebUI Forge供给的东西和功用十分强大,可以协助您战胜细节上的挑战,完结准确的换脸。希望这篇文章能协助您轻松完结换脸作用。

共享结束,感谢阅览 欢迎点赞,收藏,评论

更多免费原创教程,重视公众号:Vito的AI力量

对AI绘图感兴趣的,欢迎加我微信vito_chat入群交流。

欢迎拜访我的免费学习AI网站:

myaiforce.com.cn/

原文地址:myaiforce.com.cn/face-swap-w…