实现效果
一、下载插件
comfyui inpaint nodes
提供重绘功能节点,效果比自带的好很多
官方介绍
使用ComfyUI更好地进行修补的节点:用于SDXL,LaMa,MAT和各种其他工具的Foocus修补模型,用于预填充修补和去除区域。
插件介绍地址
https://github.com/Acly/comfyui-inpaint-nodes
可使用的重绘模型(两个选一个)
- big-LaMa
- MAT
下载后放在
ComfyUI/models/inpaint
load fooocus inpaint补丁
- fooocus_inpaint_head.pth
- inpaint_v26.fooocus.patch
ComfyUI IPAdapter plus
提供整合了IPAdapter功能节点
插件介绍地址
https://github.com/cubiq/ComfyUI_IPAdapter_plus
ComfyUI-Impact-Pack
ComfyUI的自定义节点包此自定义节点有助于通过Detector、Detailer、Upscaler、Pipe等方便地增强图像。
插件介绍地址
https://github.com/ltdrdata/ComfyUI-Impact-Pack
二、下载IPAdapter模型
IPAdapter是非常强大的图像到图像调节模型。参考图像的主题甚至风格
所有IPAdapter工作流
https://github.com/cubiq/ComfyUI_IPAdapter_plus/tree/main/examples
需要下载以下依赖才能正常使用
- ClipVision
- IPAdapter model
https://github.com/cubiq/ComfyUI_IPAdapter_plus?tab=readme-ov-file#installation
ClipVision放在
/ComfyUI/models/clip_vision
IPAdapter model放在
/ComfyUI/models/ipadapter
权重类型
- 线性:从处理管道的开始到结束均匀地应用权重,确保始终保持一致的影响,而无需调节强度。
- 缓入 (Ease In):从一开始就逐渐增加权重,以便在管道进展过程中顺利引入效果。
- 缓和 (Ease Out):开始时影响强烈,然后逐渐减弱,在处理结束时有效地减弱效果。
- 缓入缓出:缓入和缓出效果的组合;它以较温和的影响开始和结束,在中间达到峰值以获得最大影响。
- 弱输入:具体减少处理链开始时效果的影响,使得初始元素不那么明显。
- 弱输出:减少对处理链末端的影响,软化图像的最终方面。
- 弱中间:最大限度地减少处理链中点的效果影响,通常是为了保持清晰度或关注开始和结束方面。
- 强中间:放大处理链中心部分的效果,强化对图像核心元素的影响。
- 风格转换 (SDXL):专为 SDXL 模型设计,此选项专注于将参考图像的风格适应目标图像,利用 SDXL 的功能实现细致入微的风格转换。
- 构图(SDXL):针对 SDXL 模型量身定制,旨在合并参考图像和目标图像的构图元素,强调空间内元素的排列和交互。
更多参数解释查看以下网址
https://www.runcomfy.com/tutorials/comfyui-ipadapter-plus-deep-dive-tutorial
可能遇到问题
ClipVision model not found
下载clip_vision
https://github.com/cubiq/ComfyUI_IPAdapter_plus?tab=readme-ov-file#installation
下载完需要改名
例如 CLIP-ViT-bigG-14-laion2B-39B-b160k.safetensors
因为下载时的名字是model.safetensors
网盘资源
我用夸克网盘分享了「ComfyUI教程」,点击链接即可保存。打开「夸克APP」,无需下载在线播放视频,畅享原画5倍速,支持电视投屏。
链接:https://pan.quark.cn/s/274b451a3072
视频讲解
b站视频
https://www.bilibili.com/video/BV1znxsedEXV/?vd_source=f7ba66eceb00e4805d1897131c92dd15