ai绘画软件,可以识图的软件 AI作图手把手教程系列(三):进阶篇 :使用ControlNet插件可控生成AI

默认分类12个月前发布 admin
2,033 0
ChatGPT国内版

续前两篇AI教程,本篇文章将继续为大家介绍如何在中使用有控制的生成AI图像。下面给大家看一组图,这组图使用了线稿功能,带大家初步体验一下强大的制图功能。

本篇文章将介绍从安装和相关模型->使用,过程都非常简单,但效果非常惊人。当然,模型和参数其实内容还是很多的,具体模型选择和参数调整我们将在下一篇文章介绍。在此,先带大家简单演练一下。

图1. 使用中模型(模型下载和选择后续详细介绍)

图1. – canny

图2. 使用中模型(模型下载和选择后续详细介绍)

图2. – depth

下面以canny模型为例:

整体思路介绍

1. 安装插件和对应模型。

2. 先选择一个整体模型。比如,我这里选择的仍旧是上一篇文章用到的中国风。

3. 让帮你提取线稿,也是用来控图的基础,这一步就像画师先描线一样。

4. 调整模型参数或选择不一样的模型,调整效果。

5. 点击生成图像,此时生成的图像与原稿有几分相似。

上述1 在本文第二部分介绍。2,3,4,5具体操作在本文第三部分介绍。

安装插件和对应模型

安装插件前,需要安装UI,如未安装可浏览《》

2.1 安装插件

下图按照步骤依次点击->->Load from:-> 查看下面列表中的相关扩展插件,点击“”。

图3. 插件安装

ai绘画软件,可以识图的软件 AI作图手把手教程系列(三):进阶篇 :使用ControlNet插件可控生成AI

如果您有需要编辑姿势的需求,那么建议您往下翻一点,找到一个名为 的插件,安装该插件。

图4. 插件安装

安装好后上述插件后,可以再-下面看到上面两个插件。如下图5所示:

图5

安装好后,我们打开ui,可以看到。

图6

2.2 安装模型()

图7

图8

wget https://huggingface.co/lllyasviel/ControlNet/resolve/main/models/control_sd15_canny.pth

使用生成图

3.1 选择模型,上传图片

打开ui界面,选择这节课的图片风格(.)。点击框右边的箭头(见图10),展开后上传我们上节课生成的图片

图10

3.2 提取线稿

然后按照图11的步骤先试试,注意一定要选中,否则无效。最后,点击 ,结果得到线稿。

图11

3.3 适当调整模型参数,最后生成点击。

ai绘画软件,可以识图的软件 AI作图手把手教程系列(三):进阶篇 :使用ControlNet插件可控生成AI

图12

参数介绍-canny

图13

-启用:勾选后,点击生成按钮时,将会实时通过引导图像生成,否则不生效。

Input Color:将你用画笔涂抹的区域颜色进行反转。

RGB to BGR:颜色通道反转

Low VRAM:低显存模式如果你的显卡内存小于4GB,建议勾选此选项。

Guess Mode:猜测(盲盒)模式,不需要任何正面与负面提示词,出图效果随机。备注:经本站测试,盲盒效果极佳,很有可能产生意想不到的惊喜效果!

:预处理器,每个的模型都有不同的功能。

Model:该列表的模型选择,必须与预处理选项框内的模型名称一致。如果预处理与模型不致也可以出图,但效果无法预料,且并不理想。比如:选择canny,model选择,可以从名称辨别出。

:权重,代表使用生成图片的权重占比影响。

(T):中文为引导强度,在理解此功能之前,我们应该先知道生成图片的步数功能,步数代表生成一张图片要刷新计算多少次。假如你设置的生成步数是20步,引导强度设置为1时,代表这20步中的每1步都会被引导1次,个人认为引导强度数值为1,效果最佳。

:Canny线稿分辨率,该数值越高,区域所生成的的预处理图像越精细。

Canny low :生成的线稿最低阈值,也就是控制最低采样深度。

Canny high :生成的线稿最高阈值,也就是控制最高采样深度

Mode:“调整图像大小模式。默认使用缩放至合适即可,将会自动适配图片。

Width与 :画布宽高。请注意这里的宽高,并不是指SD生成图片的图像宽高比。该宽高代表引导图像时所使用的比例,假如你用SD生成的图片是1000*2000的分辨率,那么使用引导图像时,对显存的消耗将是具大的;我们可以将该分辨率设置为500*1000,也就是缩放为你原本图像一半的分辨率尺寸去进行引导,有利于节省显存消耗。

blank :如果您之前使用过功能,那么将会在的图像区域留有历史图片,点击该按钮可以清空之前的历史,也就是创建一张空白的画布。

:点击该按钮可以预览注释器结果

如果您使用Canny作为预处理和模型,那么点击该按钮之后,可以看到一张通过Canny模型提取的边缘线图片。

如果您使用作为预处理和模型,那么点击该按钮之后,可以看到一张通过模型提取的人物骨骼图片。

如果现在看不懂也没有关系,后续将会对该功能进行详细的补充。

Hide :隐藏通过按钮生成的预览图像窗口【建议不隐藏】。

© 版权声明
广告也精彩

相关文章

暂无评论

暂无评论...