一遍就会!Stable Diffusion 图生图最全、最强教程!

您所在的位置:网站首页 sketchbook可以建蒙版么 一遍就会!Stable Diffusion 图生图最全、最强教程!

一遍就会!Stable Diffusion 图生图最全、最强教程!

2024-07-13 16:26| 来源: 网络整理| 查看: 265

图生图教程

img

前言

本文需要读者对Stable Diffusion有一定使用经历,了解文生图相关内容。部分重复内容已在文生图教程体现,如采样方法、迭代步数、面部修复、可平埔、宽度、高度、生成批次等,读者可查阅教程 文生图。

图生图核心内容

图生图主要有以下几个核心内容:

CLIP反向推理(Interrogate CLIP)、图生图(img2img)、涂鸦绘制(sketch)、局部绘制 (inpaint);局部绘制之涂鸦蒙版 (inpaint sketch)、局部绘制之上传蒙版 (inpaint upload)以及批量处理 (batch)

img

其他基本参数

img

引用部分来自:https://juejin.cn/post/7221072002336079909#heading-3

Resize mode: 缩放模式,包括 拉伸/Just resize、裁剪/crop and resize、填充/resize and fill、仅调整大小(潜空间放大/just resize (latent ipscale) ,缩放模式指的是当原图和要生成的图的宽和高不一致的时候,选择的缩放模式,一般选择裁剪,如果原图和生成图的宽高一致的时候,选择任意均可 Mask blur: 蒙版模糊度,在 0-64 之间调节,就是将我们涂抹区域,从边缘向中间透明过渡。数值较小的时候,边缘越锐利,所以一个合适的值会让图片看起来更真实,数值一般默认即可 Masked content: 蒙版蒙住的内容,包括 填充/fill、原图/original、潜在噪声/latent noise、无潜在空间/latent nothing。这是一种预处理的步骤,其中填充是指使用蒙版边缘图像的颜色填充,不过颜色已经被高度模糊;原图则是同原图一样不改变任何细节;而潜在噪声则是使用噪点进行填充;而无潜在空间就是噪点值为0的状态,可以看到只有原图保留了原来的画面,所以一般选择原图即可 Mask transparency: 蒙版的透明度,一般默认为0,即不透明,因为透明度越高,AI发挥的空间越小,基本上当透明度大于60,预处理就会失去作用 Mask mode: 蒙版模式,包括 绘制蒙版内容/inpaint masked、绘制非蒙版内容/inpaint not masked,这个很好理解,选择第一个就是只在蒙版区域重绘,另一种则相反,正常一般默认第一个即可 Inpaint area: 绘制区域,包括 全图/whole picture、仅蒙版/only masked。全图重绘是指在原图大小的基础下绘制蒙版区域,优点就是内容与原图融合的更好,缺点是不够细节;而蒙版重绘是只处理的时候将蒙版区域进行放大到原图的尺寸,画完之后再缩小放到原图的相应的位置,优点就是细节更好,缺点也是细节太多,与原图融合的不够好 Denoising strength: 重绘强度,默认0.75,低强度就是基本不重绘,越高重绘越强,融合越不好,所以默认即可 虽然图生图的参数比较多,但大多数的时候,我们选择默认即可,因为很多时候,只需要正确的选择而非过多的选择,个人也仅仅设置一下缩放模式、采样器、采样步骤和宽高进行出图。

教程开启

以上内容作者会一一详尽介绍,希望读者朋友们都有所收获。本文使用到的图片素材如下:

img

让我们开启教程吧!

CLIP反向推理(Interrogate CLIP)

我们既然可以从文字tag推理出图片,那可不可以用图片推理其文字tag呢?Stable Diffusion给我们的答案是可以的,也就是使用**CLIP反向推理(Interrogate CLIP)**功能。

使用教程

拖动目标图片至图生图区域,点击右上功能按钮 CLIP反向推理(Interrogate CLIP),等等几秒即可。如下图:

img

结果验证 a woman in a red top and white shorts is in a boxing ring with her arm raised up and a light shining on her 翻译: 一个穿红上衣和白短裤的女人站在拳击台上,举起手臂,一盏灯照在她身上

从结果描述来看,和图片还是很相近的。Get!

图生图(img2img)

可以根据你上传的图片生成一张在原图基础上创作的新图片,当然你也可以通过修改Prompt生成自己想要的结果。

不适用Prompt,其他参数也不修改的情况下,让我们看看效果:

img

说实话重绘的差距有些离谱。这是为什么呢?这里就要引入一个重要参数 重绘强度/Denoising strength

重绘强度/Denoising strength

这个参数决定了我们重绘幅度,也就是说参数越高,幅度越大,图片生成差距越大。经测试参数超过0.75基本上和原图没啥关系了,效果测试如下:

从左到右参数依次为:0 、0.4、0.75、1

img

使用提示词,会增加一些其他效果

提示词:With a football in his hand(手里拿个足球)重绘强度:0.4

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

涂鸦绘制(sketch)

涂鸦绘制可以进行二次创作,如衣服换色,线稿上色等。使用方法也比较简单:点击涂鸦绘制,移入图片,就可以进行涂鸦绘制。可以用画笔随便画上两笔,重新生成,结果如下(注意:涂鸦颜色也会生效哦):

img

img

妙笔回春

随意绘制如图,原谅我的创作,但效果真不错,感谢SD:

提示词:A woman(一个女人)重绘强度:0.7

img

效果惊艳到了

img

局部绘制 (inpaint)

针对作品局部重绘,大多数场景都用在换装上,偶尔也用在某些部位的调整,比如手部或者熊部。

注意:局部绘制并不会让涂鸦颜色生效,而且画笔是黑色的。

给小姐姐换衣服

我们想要把小姐姐的衣服进行修改,那么就把衣服部分涂抹掉,并且增加提示词,其他参数不做改变:

提示词:White clothes(白色衣服)重绘强度:0.7

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传

结果验证

当然也可以选择没有衣服。PS:老司机专属

img

局部绘制之涂鸦蒙版 (inpaint sketch)

从名称可以看出来,其实是涂鸦绘制(sketch) 和 **局部绘制 (inpaint)**的结合版,就是说使用本模块可以实现前两者的功能,也就是可以对作品进行局部绘制的同时还可以自定义颜色。

换带颜色的衣服

使用黄色画笔,对其胸部衣服着色涂鸦,并且使用提示词cheongsam(旗袍)

提示词:cheongsam(旗袍)重绘强度:0.7

img

穿着旗袍的拳击手

img

快去尝试吧,剩下全靠你的想象力了。

局部绘制之上传蒙版 (inpaint upload)

跟 局部绘制之涂鸦蒙版 (inpaint sketch),区别在于一个是手绘,一个是借助其他工具。读者可以借助PS工具画出来个蒙版(Mask),然后再upload(上传)。所有这个模块有两个文件上传地方:

img

蒙版

百度找的,不想麻烦PS(主要作者太懒)!

img

结果验证

主要是你用其他工具制作的目标效果肯定比你手绘的好很多,所以才有了这个功能。如果不是专业搞设计的,其实也没必要使用这个功能。这里面,我用的是黑白蒙版,这个效果是把白色部分进行了重绘,黑色部分其实并未进行大幅修改,我测了几次效果都是如此。

提示词:cheongsam(旗袍)重绘强度:0.7

当然你也可以通过更改蒙版其他参数来获取想要的效果,具体效果这里就不一一展示。参数说明在正文的其他参数说明区域。

批量处理 (batch)

这一部分涉及内容很多,后面会单开教程,主要涉及真人动漫化以及视频制作。

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

感兴趣的小伙伴,赠送全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。

需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手! 在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。 在这里插入图片描述 在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。 在这里插入图片描述 这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】



【本文地址】


今日新闻


推荐新闻


CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3