ComfyUI 完全入门:必备插件

news2024/9/28 15:04:38

前言

大家好,我是每天分享AI应用的月月!

ComfyUI 是一个基于 Stable Diffusion 的AI绘画创作工具,最近发展势头特别迅猛,但是 ComfyUI 的上手门槛有点高,用户需要对 Stable Diffusion 以及各种数字技术的原理有一定的了解才行。这个系列将会介绍 ComfyUI 的一些基础概念和使用方法,让大家更快的掌握 ComfyUI 的使用技巧,创作出自己独特的艺术作品。

本文继续分享 ComfyUI 的使用方法:必备插件。

就像 Stable Diffusion WebUI 本身只提供核心的文生图、图生图能力,其它的ControlNet、抠图、数字人等的能力都是通过插件提供的;ComfyUI 基础的支持功能也很有限,更多的能力也是通过插件支持的,而且 ComfyUI 插件的能力粒度更为细致,通过各种组合可以发挥出更为强大的作用。

所有的AI设计工具,模型和插件,都已经整理好了,👇获取~在这里插入图片描述

安装基础管理插件

ComfyUI-Manager 是 ComfyUI 的一个基础管理插件,通过它我们可以很方便的管理其它插件、模型、依赖的程序包,以及了解 ComfyUI 社区的最新消息,实乃居家必备之优秀插件。

插件的官方地址:https://github.com/ltdrdata/ComfyUI-Manager

首次安装时,我们需要手动把程序下载到 ComfyUI 的这个目录中:ComfyUI/custom_nodes,在ComfyUI中插件就是自定义节点。

建议使用 git 的方式,方便以后更新:git clone https://github.com/ltdrdata/ComfyUI-Manager

也可以通过别的方式下载后放到这里。不方便访问 Github 的同学可以下载我分享的程序包,给公众号“萤火遛AI”发消息:ComfyUI 即可获取。

程序文件部署完毕后,我们需要重新启动 ComfyUI,这时候我们会在管理菜单栏中看到这个“Manger”的按钮。

点击它就会弹出这个管理器插件的主页面,我们主要使用中间的这些按钮,它们可以对插件、模型,以及ComfyUI自身进行管理。

  • Install Custom Nodes:安装、停用、更新、卸载插件都从这里进入。

  • Install Missing Custom Nodes:我们从其它用户获取的工作流可能包含我们没安装过的插件,通过这个功能可以安装缺失的插件,在ComfyUI中就是缺失的节点。

  • Install Models:AI绘画不可避免的会涉及很多AI模型,通过这里可以安装常见的模型。

  • Install via Git URL:通过插件的Github地址进行安装,可以解决这种问题:插件没有被收录到插件列表中。

  • Update All:更新所有插件和ComfyUI自身。

  • Update ComfyUI:更新ComfyUI程序到最新版本。

  • Fetch Updates:获取更新,但不应用,由用户自己决定是否升级到最新版本。

ComfyUI 的更新速度很快,这可以让用户快速获取到最新的能力,不过这也容易引入一些BUG和插件冲突,不建议每天都更新,仅在你需要获取某种新能力的时候才进行更新。

安装其它必备插件

因为我们已经安装了“Manager”插件,其它的插件都可以通过这个管理工具进行安装了,当然你也可以继续使用手动下载的方式进行安装,只是相比之下有点麻烦。

必备插件

这些推荐几个我认为比较重要和基础的插件:

  • AIGODLIKE-ComfyUI-Translation:界面汉化插件,不喜欢看英文的应该是大多数吧。插件地址:https://github.com/AIGODLIKE/AIGODLIKE-ComfyUI-Translation

  • ComfyUI_Custom_Nodes_AlekPet:中文提示词插件,可以用中文输入生成图片的提示词,进一步降低文生图的使用门槛。插件地址:https://github.com/AlekPet/ComfyUI_Custom_Nodes_AlekPet

  • ComfyUI-Custom-Scripts:界面辅助工具,比如:对齐节点、自定义节点颜色、维护自己的常用提示词、展示生成图片的列表等,让使用更方便。插件地址:https://github.com/pythongosssss/ComfyUI-Custom-Scripts

  • sdxl_prompt_styler:SDXL风格提示词插件,使用这个插件可以快速生成多种风格图片,比如动漫、素描、泥塑、折纸、电影、蒸汽朋克等70多种风格,可以省掉一些Lora的安装工作。插件地址:https://github.com/twri/sdxl_prompt_styler

  • ComfyUI-Advanced-ControlNet:ControlNet插件,使用线稿、姿态、深度、IP等控制数据和响应的ControlNet 模型控制图片的生成,Stable Diffusion 必备。插件地址:https://github.com/Kosinkadink/ComfyUI-Advanced-ControlNet

  • comfyui_controlnet_aux:ControlNet的预处理器,用于从参考图片中提取线稿、姿态、深度、IP等控制数据,Stable Diffusion 必备。插件地址:https://github.com/Fannovel16/comfyui_controlnet_aux

怎么安装?

在“Manager”界面中点击“Install Custom Nodes”,它会去同步插件的信息,稍等片刻。

在打开的插件列表中,找到我们需要的插件,点击对应的安装按钮进行安装。

这里会显示正在安装,安装成功后,会提示我们重启。

重启成功后,我们还需要把浏览器页面也刷新一下,然后就可以在 ComfyUI 中使用这些插件了。

注意中文翻译,需要我们到 ComfyUI 的设置中找到这个“AGLTranslatioin-language”,选择“中文”,然后才能生效。以后也可以在管理菜单中点击“Switch Locale”进行切换。如下图所示:

插件、模型和依赖库下载

放到哪里

插件目录

上边已经介绍过:_ComfyUI/custom_nodes,_每个插件一个目录,进入具体的目录就是插件的相关文件。

模型的目录

模型通常有两个地方,公共模型(多个插件可能都会使用的模型):ComfyUI/models

插件特有的模型,一般在插件的目录中,比如这个WD14提示词反推插件:

依赖库的目录

依赖库一般都是通过包或者程序管理工具安装的,不需要手动安装,这里就不介绍了。

网络问题

这些插件、模型和它们依赖的程序默认都是通过网络下载的,如果你访问外网没有问题,这就不是个问题。

但是这通常是个问题,因为很多同学都没有特殊网络设置,解决办法我这里列一下。

插件程序:一般都是发布在 Github 的,Github访问不了的同学,可以去国内的类似码云的平台上找找有没有同步的镜像:https://gitee.com/。

依赖的Python库:它们会在插件安装的时候自动下载并部署,这通常也不需要特殊网络设置,如果速度比较慢,可以在网上查找“更换本地Python包源”的方法。

AI模型:大部分都是发布在 huggingface 和 Github 上的。huggingface 可以通过国内的镜像代替:https://hf-mirror.com/,Github还是先去看看码云等平台上找找。

实在找不到的,可以联系我。

使用镜像

我在AutoDL上分享了一个镜像,安装了大部分常用的插件和模型,内置了常用的工作流,比如文生图、图生图、ControlNet、背景替换、文生视频、图生视频等等,一键启动,可以省掉很多麻烦事,让你专注创作。如有定制工作流方面的需求,也可以反馈给我。

镜像地址:https://www.codewithgpu.com/i/comfyanonymous/ComfyUI/yinghuoai-ComfyUI

在镜像地址页面,点击右下角的“AutoDL创建实例”,GPU型号建议选择RTX 3090、4090等,性能比较强。

也可以在实例创建页面选择社区镜像:yinghuoai-ComfyUI

AutoDL是一个云计算平台,提供显卡服务器租用服务,可按小时付(1-2元左右),显卡价格相比阿里云、腾讯云有明显的优势,我一直在用,推荐本地硬件性能不足的同学试试。


为了帮助大家更好地掌握 ComfyUI,我在去年花了几个月的时间,撰写并录制了一套ComfyUI的基础教程,共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。

由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取

在这里插入图片描述

一、ComfyUI配置指南

  • 报错指南
  • 环境配置
  • 脚本更新
  • 后记

img

二、ComfyUI基础入门

  • 软件安装篇
  • 插件安装篇

img

三、 ComfyUI工作流节点/底层逻辑详解

  • ComfyUI 基础概念理解
  • Stable diffusion 工作原理
  • 工作流底层逻辑
  • 必备插件补全

img

四、ComfyUI节点技巧进阶/多模型串联

  • 节点进阶详解
  • 提词技巧精通
  • 多模型节点串联

img

五、ComfyUI遮罩修改重绘/Inpenting模块详解

  • 图像分辨率
  • 姿势

img

六、ComfyUI超实用SDXL工作流手把手搭建

  • Refined模型
  • SDXL风格化提示词
  • SDXL工作流搭建

img

由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取

在这里插入图片描述

img

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2173871.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

小麦生长状态检测系统源码分享

小麦生长状态检测检测系统源码分享 [一条龙教学YOLOV8标注好的数据集一键训练_70全套改进创新点发刊_Web前端展示] 1.研究背景与意义 项目参考AAAI Association for the Advancement of Artificial Intelligence 项目来源AACV Association for the Advancement of Computer…

基于SpringBoot的新冠检测信息管理系统的设计与实现

文未可获取一份本项目的java源码和数据库参考。 国内外在该方向的研究现状及分析 新型冠状病毒肺炎疫情发生以来,中国政府采取积极的防控策略和措施,经过两个多月的不懈努力,有效控制了新发病例的増长,本地传播已经趋于完全控制…

万字面试题大模型面试,最全八股和答案

自ChatGPT开启大模型时代以来,大模型正迎来飞速发展,现在从事大模型开发相关工作可谓是处在时代的风口。那么大模型面试需要哪些技能和技巧呢,本文详细整理了全套的面试问题及答案,希望对大家有所帮助! 目录 大模型&a…

如何让 Android 的前端页面像 iOS 一样“优雅”?

作者:方英杰(崇之) 最近在调研前端页面适配 Android 端异形屏的方案,调研过程中发现了一些比较有意思的点,本文主要是做一个总结。 一、提出问题 首先,我们需要知道 Android 上的前端适配面临着什么问题。 问题其实很…

视频怎么加字幕?视频加字幕的5种方法,小白进阶高手!

视频怎么加字幕?视频加字幕不仅可以添加内容的可读性,也避免很多语言错误,可以更-好地帮助观看者理解创作者的制作理念。对于视频创作的初学者而言,掌握几种简单易用的加字幕方法尤为重要。本文将详细介绍五种视频加字幕的方法&am…

一文速读 LLaMA3.2-Vision 模型的结构

随着 Meta 放出了 LLaMA3.2 系列模型,LLaMA 系列也是正式迎来了官方版本的多模态大模型 LLaMA3.2-Vision [1]。那我们就在本期内容中聊一聊 LLaMA3.2-Vision 模型的结构,希望对大家有所帮助。 相关代码位于 [2] 结论 先说结论,LLaMA3.2 的…

6.Javaweb-过滤器与监听器

Javaweb-过滤器与监听器 文章目录 Javaweb-过滤器与监听器一、过滤器**Filter接口API:** 过滤器生命周期1.创建(Creation):2.初始化(Initialization):3.执行(Execution)&…

【设计模式-状态模式】

定义 状态模式(State Pattern)是一种行为型设计模式,允许对象在其内部状态改变时改变其行为。该模式将状态的变化封装在状态对象中,从而使得对象的行为随着状态的变化而变化。 UML图 角色 Context(上下文&#xff0…

使用scroll-behavior属性实现页面平滑滚动的几个问题

在较长的页面中,为了便于用户浏览,开发人员经常会使用锚点链接,锚点链接默认的效果是瞬间跳转,为了让用户体验更好,往往会添加滚动效果。我记得要实现滚动效果,以前一般是结合一段JavaScript代码来实现。 后…

CSS04-Chrome调试工具

Chrome 浏览器提供了一个非常好用的调试工具,可以用来调试我们的 HTML结构和 CSS 样式。

万户OA-ezOFFICE fileUpload.controller 任意文件上传漏洞复现

0x01 产品描述: 万户OA(Office Automation)是一款企业级协同办公管理软件,旨在为企业提供全面的办公自动化解决方案。万户ezOFFICE存在任意文件上传漏洞。攻击者可以通过该远程下载任意文件到目标服务器,导致攻击者可获…

生信初学者教程(十四):差异结果的火山图

文章目录 介绍加载R包导入数据画图函数火山图输出结果总结介绍 火山图(Volcano Plot)是一种用于展示基因差异表达分析结果的二维散点图。它通过同时展示统计显著性和变化幅度,帮助研究者识别出在不同条件下显著差异表达的基因。火山图的横轴通常表示基因表达变化的倍数对数(…

第 18 章 从猫爷借钱说起——事务简介

18.1 事务的起源 CREATE TABLE account ( id INT NOT NULL AUTO_INCREMENT COMMENT 自增id, name VARCHAR(100) COMMENT 客户名称, balance INT COMMENT 余额, PRIMARY KEY (id) ) EngineInnoDB CHARSETutf8;insert into account (name, balance) values (狗哥, 11), (猫爷, 2…

VS开发C++项目常用基础属性配置

这篇文件简单讨论一下visual studio中项目属性的常用基础配置。 1.输出目录:项目目标文件生成位置。 2.中间目录:项目生成的中间文件所在的位置。 3.目标文件名:项目生成目标文件名称。 4.附加包含目录:三方库等头文件所在的位…

图新说 注册机使用 功能介绍

图新说简介 1. 什么是图新说? 图新说是一款技术自主可控的国产三维BIMGIS数字化方案汇报、成果交付平台。主要解决汇报方案的精准还原、方案展示、方案汇报及成果交付问题。 将影像、实景三维等周边现状数据与设计成果完美融合将设计方案二三维一体化表达流畅讲解设…

用Promise实现前端并发请求

/** * 构造假请求 */ async function request(url) {return new Promise((resolve) > {setTimeout(() > {resolve(url);},// Math.random() * 500 800,1000,);}); }请求一次,查看耗时,预计应该是1s: async function requestOnce() {c…

vue 项目打包更新后,界面未刷新时js与css资源加载404,监听资源文件404后自动重新加载页面。

问题 vue 项目打包更新(生成环境)后,界面未刷新时js与css资源加载404,如图: 期望 希望可以监听到资源文件加载404时,刷新界面,解决打包后由于文件名的变化导致点击旧页面时 JS 和 CSS 文件出…

Spring MVC常用注解(绝对经典)

文章目录 一、元注解1.1 Target:1.2 Retention: 二、常见注解2.1 Controller:2.2 SpringBootApplication:2.3 RequestMapping:2.4 RequestParam:2.5 PathVariable:2.6 RequestPart:2…

OpenCV 形态学相关函数详解及用法示例

OpenCV形态学相关的运算包含腐蚀(MORPH_ERODE),膨胀(MORPH_DILATE),开运算(MORPH_OPEN),闭运算(MORPH_CLOSE),梯度运算(MORPH_GRADIENT),顶帽运算(MORPH_TOPHAT),黑帽运算(MORPH_BLACKHAT),击中…

『网络游戏』GoLand服务器框架【01】

打开GoLand创建项目 编写Go程序:main.go package mainimport ("fmt""newgame/game/gate""os""os/signal""syscall""time" )var (SinChan make(chan os.Signal, 1)closeChan chan struct{} )func ma…