在我们打开comfyui后会面对一堆节点,那么这些节点都是什么意思呢?今天跟着小元老师来学习一下吧~
一、拆解文生图基本工作流
这个是Comfyui默认的文生图工作流它的基本逻辑是:
条件输入板块——潜空间——像素空间
01 条件输入模块
Checkpoint加载器:在这里选择你的大模型。
02 CLIP文本编码器
输入正向提示词和负向提示词。
03 空Latent
设定生图尺寸和批次数:
04 潜空间模块
在这个模块AI图片开始生成,但生成的图片还不能被人眼直接识别。
05 K采样器
K采样器会通过前面模块的要求,通过不断加噪去噪,最后生成出符合要求的图像。
06 像素空间
· VAE解码
通过VAE解码器将AI在潜空间生成的图像转换为我们可以识别的像素图。
· 保存图像
在这里看你最终生成的效果图。
二、Comfyui基础操作
· 如何添加节点?
01 双击空白地点
双击空白地点搜索你要添加的节点名称就行:
02 右键鼠标添加
点击右键找到新建节点然后寻找你要添加的节点:
· 如何将节点并入到工作流?
我们以添加一个lora节点为例,首先双击空白地方搜索lora添加一个lora节点。
这个时候节点还没有进入工作流中,comfyui需要你连线来操作。
那么如何连线呢?
01 节点逻辑
节点与节点之间的关系是一个线性的关系,也就是说他们会依次处理。
就像我们第一节拆解基本工作流那样,一张图片的生成是依次进行的,首先大模型节点运行选择合适的大模型,接着是到了提示词节点识别提示词,然后在K采样器生成,最后VAE编码输出,因此我们要放入的节点一定要在它发挥作用的位置。
例如我们要放入的lora模型节点,它肯定是在选择大模型之后的。
02 节点接口
想要节点连线,我们要明白不同的接口的含义是什么。
接口颜色:
一般情况下不同颜色的接口是不能相互连接的,因此我们要按照颜色来连接接口。
例如我们将lora模型节点连接如下图所示:
将节点逻辑从大模型到正向提示词到采样器,增加为从大模型到lora模型到正向提示词到采样器。
三、如何添加controlnet插件
01 插件安装
如果你使用的是秋葉的整合包,那么将整合包附属的controlnet模型放置到:
comfyui安装目录/models/controlnet 文件夹内:
02 调用controlnet插件节点
首先双击空白区域搜索controlnet将插件节点调出:
controlnet的前置接口是条件:
因此我们可以根据这个找上一个接点,发现正向提示词上也有条件,所以可以得出controlnet节点是接在正向提示词之后的。
03 在接口上新建节点
拖拽接口然后松开就可以在接口上新建节点了:
如上图我们新建了一个controlnet加载器,那么在这个加载器中我们就可以使用controlnet模型了:
模型加载好了,我们还需要添加一个预处理器处理图像。
双击空白地方添加一个canny预处理器出来,然后拖拽图像接口添加加载图像,然后连接:
这样我们的一个加载lora并有controlnet的工作流就搭建好了:
上传一张参考图测试一下,可以正常运行:
最后,大家记得保存工作流,方便下次使用。