图生图根本参数

  • 图生图功用主要包含六大类:图生图 / img2img涂鸦制造 / sketch部分制造 / inpaint部分制造之涂鸦蒙版 / inpaint sketch部分制造之上传蒙版 / inpaint upload批量处理 / batch
  • 而图生图的根本参数包含但不限于以下几种:
  • Resize mode: 缩放形式,包含 拉伸/Just resize裁剪/crop and resize填充/resize and fill仅调整巨细(潜空间扩大/just resize (latent ipscale) ,缩放形式指的是当原图和要生成的图的宽和高不一致的时分,挑选的缩放形式,一般挑选裁剪,假如原图和生成图的宽高一致的时分,挑选恣意均可
  • Mask blur: 蒙版含糊度,在 0-64 之间调理,便是将咱们涂改区域,从边际向中间通明过渡。数值较小的时分,边际越锋利,所以一个合适的值会让图片看起来更实在,数值一般默许即可
  • Masked content: 蒙版蒙住的内容,包含 填充/fill原图/original潜在噪声/latent noise无潜在空间/latent nothing。这是一种预处理的步骤,其间填充是指运用蒙版边际图像的色彩填充,不过色彩现已被高度含糊;原图则是同原图一样不改动任何细节;而潜在噪声则是运用噪点进行填充;而无潜在空间便是噪点值为0的状况,能够看到只要原图保留了原来的画面,所以一般挑选原图即可
  • Mask transparency: 蒙版的通明度,一般默以为0,即不通明,由于通明度越高,AI发挥的空间越小,根本上当通明度大于60,预处理就会失掉作用
  • Mask mode: 蒙版形式,包含 制造蒙版内容/inpaint masked制造非蒙版内容/inpaint not masked,这个很好理解,挑选第一个便是只在蒙版区域重绘,另一种则相反,正常一般默许第一个即可
  • Inpaint area: 制造区域,包含 全图/whole picture仅蒙版/only masked。全图重绘是指在原图巨细的根底下制造蒙版区域,长处便是内容与原图融合的更好,缺陷是不行细节;而蒙版重绘是只处理的时分将蒙版区域进行扩大到原图的尺度,画完之后再缩小放到原图的相应的方位,长处便是细节更好,缺陷也是细节太多,与原图融合的不行好
  • Denoising strength: 重绘强度,默许0.75,低强度便是根本不重绘,越高重绘越强,融合越不好,所以默许即可
  • 虽然图生图的参数比较多,但大多数的时分,咱们挑选默许即可,由于很多时分,只需求正确的挑选而非过多的挑选,个人也只是设置一下缩放形式、采样器、采样步骤和宽高进行出图

最新版本 Stable Diffusion 开源 AI 绘画工具之图生图进阶篇

图生图(img2img)

  • 能够依据你上传的图片生成一张在原图根底上创作的新图片
  • 能够通过修改 Prompt 去自定义想要的结果图片,比方白色头发,红色眼睛等等

最新版本 Stable Diffusion 开源 AI 绘画工具之图生图进阶篇

涂鸦制造(Sketch)

  • 在原图根底上涂鸦后,进行二次创作,这是最根底的用法,当然也能够进行线稿的上色
  • 模型要挑选好,假如想要生成二次元的,记得挑选二次元模型,下图测验挑选的是真人模型
  • 在进行线稿上色的时分,设置 缩放形式为裁剪 ▶ 采样器是 DPM++ 2M Karras ▶ 采样步骤设置的是30 ▶ 脚本 Script 中挑选是图像迭代 Loopback ▶ 迭代次数设置成多少生成的图片便是多少张,一般设置2-4,避免显卡撑不住 ▶ 终究的重绘强度 Final denoising strenght 设置成了 0.88 ▶ 重绘曲线挑选 Linear ▶ 迭代中反推提示词挑选 DeepBooru,生成的终究图片作用仍是很棒的

最新版本 Stable Diffusion 开源 AI 绘画工具之图生图进阶篇

部分制造(Inpaint)

  • 在部分制造中,咱们只需求将需求重绘的地方圈出来,然后加上 Prompt 提示词即可
  • 其间蒙版的黑色画笔并不是一种真的色彩,它是一片代表通明(不行见)特点的区域
  • 比方,将图片中的女生头发换成一头青丝,只需求将图片上的头发区域涂上蒙版,然后在 Prompt 中输入 white hair 提示词即可
  • 当然这儿只作为测验,假如想要更好的作用,自己设置更多的 Prompt 进行描述,除了头发,其他任何区域都能够进行重绘

最新版本 Stable Diffusion 开源 AI 绘画工具之图生图进阶篇

涂鸦蒙版(Inpaint sketch)

  • 相比于部分重绘,多了一个蒙版通明度的装备,这是由于这儿的蒙版是能够自定义色彩的
  • 在部分制造中画笔只要黑色,而在涂鸦蒙版中蒙版的色彩会影响到原图,挑选什么色彩终究重绘都会往这个色彩上靠
  • 蒙版通明度依照需求色彩的程度调理,最好不要超过40
  • 比方将动漫女生衣服换成红色的旗袍,只需求将衣服用红色的画笔涂改,然后在 Prompt 中输入我国旗袍的英文解释即可,由于涂鸦蒙版的色彩是会影响到原图的,所以假如是用蓝色涂改衣服,终究将会生成蓝色的旗袍

最新版本 Stable Diffusion 开源 AI 绘画工具之图生图进阶篇

上传蒙版(Inpaint upload)

  • 跟涂鸦蒙版其实差不多,只是上传的蒙版需求借助其他工具如PS的处理,相比直接手涂肯定是更精确

  • 上传蒙版的蒙版在制造时能够设置部分通明的作用(不同程度的灰),还有边际的羽化等等。此时需求留意具有相同作用的蒙版含糊的运用

  • 需求留意的一点是,在上传蒙版中,白色代表重绘,黑色代表不处理。也不必细分,假如弄错了,在蒙版形式中挑选重绘非蒙版就能够

  • 为了方便测验,就将图片放到涂鸦蒙版中,用是非两色把原图进行圈出,截图上传到上传蒙版中了,趁便加了 Prompt 的参数是天空、建筑物、人物等,能够看出 AI 只在白色区域进行了重绘,而圈出的黑色是没有重绘的

  • 还有最终一个批量处理功用,用的不多,也不必讲太细,只要输入图片地点目录途径、图片处理后保存的途径以及蒙版路劲即可批量处理

最新版本 Stable Diffusion 开源 AI 绘画工具之图生图进阶篇

本文正在参与「金石计划」