商务服务
5分钟学会Stable Diffusion图生图功能
2024-11-01 00:56

(全套教程文末领取哈
目录如下

5分钟学会Stable Diffusion图生图功能

img

注意,本文默认你已经了解所有文生图的内容,因为图生图实际上是在文生图的基础上在加上原图作为一个输入变量,和文生图中的一些参数如正负tag、模型、lora等一起作为输入变量生成最后的结果,如果对文生图不了,可以参考之前的介绍文生图的章节。

其中和文生图一样的参数此处不再赘述,包括

  • 采样方法
  • 迭代步数
  • 面部修复
  • 可平埔
  • 宽度
  • 高度
  • 生成批次
  • 每批数量
  • 提示词相关性
  • 随机种子
  • 差异随机种子、差异强度等
  • 部分脚本X、Y、Z图表等

图生图中最重要的参数即为重绘幅度,首先准备一个小姐姐,不输入任何正负tag,研究下重绘幅度的对图片的影响,参数如下图所示

img

结果如下所示,可以看到妹子开始卸妆,最后到0.6直接换了一个人,1.0直接和原图无关了。

img

我们不输入负向tag,在正向tag中输入Pikachu,可以看到前几张还算正常,0.8之后就直接变成皮卡丘了

img

重绘幅度很重要,值越大表示对原图重绘幅度越大一些放大类的插件或脚本,重绘幅度不能设置太大,否则会生成非常奇怪的结果,比如一个人变成整张图都是人,这是放大器的工作原理有关系,后需来一篇专门讲如何放大发图片到2K、4K、8K

一般设置为0.75,这样图片会有较大的变化。

缩放模式默认拉伸,缩放模式指的是当原图和要生成的图的宽和高不一致的时候,是需要按照什么方式缩放,一共包含四种模式

选中右上角的小笔可以自行调整输入的图片范围

img

因为我们原图是512x1024分辨率,我们设置目标分辨率为512x512尝试,去除所有正负tag,以全图作为输入,将重绘幅度设置为0,结果如下所示,下图从左往右依次是拉伸、裁剪、填充、拉伸(放大前潜变量

img

可以看到缩放模式和重绘幅度对最终画面产生的影响,缩放模式在图片比例不一致时告诉AI该以什么比例去缩放,下面在看一个更加直接的例子加深理解,我们对下面这张方形图变成宽图512x512的分辨率变为860x460注意此时要保留原图所有的正负tag,因为我们要加大重绘幅度这时候需要告诉AI重绘的部分以原图的tag进行,提示词相关性设置为5避免对原有人物产生过变化

img

首先重绘幅度设置为0看下原始的缩放模式在分辨率变化后产生的影响,下图从左往右分别是

img

绘图会把颜色信息带入,重绘幅度越低,颜色信息表现得越明显,另外绘图会将输入图片的所有部分继续重绘

比如给衣服换个颜色,注意如果正向tag中有和衣服颜色相关的可以先去掉,避免对结果产生影响

  • 提示词相关性7
  • 重绘幅度0.1,0.4,0.5,0.6,0.7,0.8,1.0

img

如下所示,可以看到重绘幅度在0.5以内符合蒙版的颜色

img

再比如,画个房子,当然在正向tag中也需要一些提示,比如


	

img

重绘幅度分别设置为0.1,0.4,0.5,0.6,0.7,0.8,0.9,1.0

img

可以发现0.7的效果比较符合草图,也有较大的重绘效果,再以0.7画几张试试

img

另外我们发现0.60.7之间变化最大,因此尝试下重绘幅度在0.610.69的区别,发现在0.64到0.65之间画风突然转换

img

后续又再次尝试了很多次,最终没找到渐变的过程,都是重绘幅度在某个值突然画风转变,再次细分,尝试了很多次没有找到画风渐变的过程

img

下面展示下在这个过程中感觉还蛮不错的几张

img

局部重绘没有颜色信息,仅仅只针对蒙版部分或者非蒙版部分继续绘制(可通过选项控制,其中会多出几个选项,如下所示

img

其中比较重要的

比如换个换装

  • 提示词相关性7
  • 重绘幅度0.1,0.4,0.5,0.6,0.7,0.8,1.0
  • 加上关键词(blue school uniform:1.4),(pink t-shirt:1.4)

img

下面看看结果

img

发现在重绘幅度在0.5的时候比较符合结果,再将重绘幅度设置为0.5多尝试几批次,看起来也只是像

img

重绘幅度设置为0.6在试试

img

重绘幅度选择0.6,重绘区域选择全图试试,似乎效果更好一些

img

重绘幅度选择0.6、重绘区域选择全图、蒙版蒙住内容选择填充

img

重绘幅度选择0.6、重绘区域选择全图、蒙版蒙住内容选择潜变量噪声

img

重绘幅度选择0.6、重绘区域选择全图、蒙版蒙住内容选择潜变量数值零

img

重绘幅度选择0.6、重绘区域选择全图、蒙版蒙住内容选择原图、蒙版模式选择重绘非蒙版内容,故名思意,就是衣服不换,其他全换。可以看到

img

这就像是将绘图和局部重绘的结合版,即保留颜色信息也保留蒙版信息,和绘图(Sketch)的区别参考如下

What is the difference between Sketch and Inpaint Sketch
Sketch tries to colour the masked zone by rendering the whole image. So in the final, you will have a totally new image (it can be very close to what you had initially). Usually, when you use Sketch, you want to use the same prompt as you had initially. Maybe, with some changes regarding your new colouring.
Inpaint sketch rerenders only the masked zone, not touching the whole image. You can write a totally different prompt, and the inpaint will try to render your prompt in the masked area by using the colour you used.
原文:https://www.reddit.com/r/StableDiffusion/comments/10jqkd5/sketch_function_in_automatic1111/

Sketch是将颜色信息带入然后重绘整张图,通常需要将所有的正负tag信息带入,而Inpaint sketch只重绘被遮住的部分,不会重绘整张图,可以完全书写不一样的tag,然后会将颜色信息带入并且只重绘被遮住的部分

再来换个装

img

重绘幅度0.6,可以看到在一定程度上参考了我们的颜色信息,而且没有写任何提示词,使用局部重绘换装似乎更好用一些

img

下面按照重绘幅度0.1,0.4,0.5,0.6,0.7,0.8,1.0依次进行,结果如下,可以发现重绘幅度在0.4~0.6之间效果比较符合预期,重绘幅度太大AI就开始在蒙版里面放飞自我了

img

换个颜色在试试

img

其他参数和局部重绘类似,大家可以自行尝试

将输出的图片继续当作输入生成图片,迭代次数即最终生成几张,每张的前一张作为本次的输入参数一直迭代

img

采样方法DPM++ SDE Karras、步数20、重绘幅度0.6、左边为原图,右边为左右外绘的图,虽然看起来不是很符合逻辑,但是一眼就能看出这个功能的含义了,就是向图像外进行绘制,如果边缘比较硬可以调高蒙版模糊像素试试

img

上面我们没有按照该脚本的推荐设置,下面我们按照推荐设置试试

  • 步数80
  • 采样方法Euler a
  • 重绘幅度0.8

img

参考向外绘制,这是一版过时的向外绘制,仔细看还是可以就看出边缘

img

关于放大在Stable Diffusion中有很多方法,后续会专门开一篇文章说明,此处简单描述,注意使用放大的时候重绘幅度要比较小,否则画面可能重绘幅度过大, 导致变化太多,重绘幅度太小可能导致没有添加足够多的细节,放大是在尺寸倍增的时候适当添加细节。

img

在顶部生成按钮的旁边有两个按钮,这两个按钮是用来反推提示词的,比如在随便一张照片,并不是AI生成自带提示词那种(AI生成的也可以,他会根据图片的内容用文本去描述图片,第一次点击会下载相关依赖,比较慢一点

  • CLIP反推,可以看到,描述还是比较准确的,衣服、颜色、背景都符合图像,CLIP反推一般是一句话描述

img

  • DeepBooru反推,结果也很准确,不过它的风格是关键词堆砌,很想我们在书写tag时的做法

img

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助

👉[[CSDN大礼包《StableDiffusion安装包&AI绘画入门学习资料》免费分享]]安全链接,放心点击

对于0基础小白入门

如果你是零基础小白,想快速入门AI绘画是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以找到适合自己的学习方案

包括:stable diffusion安装包、stable diffusion0基础入门全套PDF,视频学习教程。带你从零基础系统性的学好AI绘画

👉stable diffusion新手0基础入门PDF👈

(全套教程文末领取哈
在这里插入图片描述

👉AI绘画必备工具👈

在这里插入图片描述

👉AI绘画基础+速成+进阶使用教程👈

观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
在这里插入图片描述
温馨提示:篇幅有限,已打包文件夹,获取方式在:文末

👉大厂AIGC实战案例👈

    以上就是本篇文章【5分钟学会Stable Diffusion图生图功能】的全部内容了,欢迎阅览 ! 文章地址:http://dfvalve.xrbh.cn/news/8752.html 
     资讯      企业新闻      行情      企业黄页      同类资讯      首页      网站地图      返回首页 迅博思语资讯移动站 http://keant.xrbh.cn/ , 查看更多   
最新新闻
2023年四川雅安公务员考试网上报考入口什么时候开通
【导读】2023年四川雅安公务员考试网上报考入口什么时候开通由四川公务员考试网提供,更多关于四川公务员考试网,四川公务员考试,
AI绘画绘画 Stable Diffusion ,从零开始轻松变现,AI绘画副业创收指南,一天一个AI帮你赚钱小技巧!
大家好,我是强哥 通过长达几个月的AI绘画Stable Diffusion 系统教程,相信大家已经对AI绘画有了一个大概的认知。最
ai取名父母姓氏取什么好听?下面揭晓ai取名生成器什么软件
当一对新手父母沉浸在迎接新生命的喜悦中时,他们往往会面临一个甜蜜的烦恼:如何为宝宝挑选一个完美的名字。字典的页边因频繁翻
3.4 网络安全管理设备
数据参考:CISP官方  目录 IDS (入侵检测系统)网络安全审计漏洞扫描系统VPN(虚拟专网)堡垒主机安全管理平
AI全自动中视频创作方法,小白秒过原创日入过百
大家好,我是善士,公主号:善士笔记主理人。今天我来分享一个利用自媒体平台撸百家号收益的项目,当然也适用于其他自媒体平台。
AI自动生成论文:软件可靠性、摘要生成及使用指南
随着人工智能()技术的飞速发展其在各个领域的应用日益广泛其中之一便是自动生成论文。本文旨在探讨自动生成论文的软件可靠性、
2024年最佳免费AI图像生成器
关注公众号【真智AI】TOP AI模型智能问答|绘图|识图|文件分析每天分享AI教程、赚钱技巧和前沿资讯!随着每周的推移,生成式AI的
132万盖红砖房被骂上热搜背后
  原标题:132万盖红砖房被骂上热搜背后  建筑不是万能的  能承载的梦想也是有限的  一个本土的综艺节目,播出到第八季
2024年互联网营销师三级理论试题.docx
互联网营销师三级理论试题一、单项选择题1.职业道德的特征不包括()。[单选题]*A、适用范围的有限性B、执行中的权威强制性√C、
5个短视频文案写作的素材网站和工具(内含福利)
很多人不会写文案,一是没有写作的经验累积,还有一个就是缺乏素材的积累。今天再给大家分享65个短视频文案写作的素材网站和工具
本企业新闻

点击拨打: