[SD必备知识18]修图扩图AI神器：ComfyUI+Krita加速修手抽卡，告别低效抽卡还原光滑细腻双手，写真无需隐藏手势

news2024/11/17 7:48:04

🌹大家好！我是安琪！感谢大家的支持与鼓励。

krita-ai-diffusion简介

在AIGC图像生成领域的迅猛发展下，当前的AI绘图工具如Midjourney、Stable Diffusion都能够近乎完美的生成逼真富有艺术视觉效果的图像质量。然而，针对人物手部细节的处理依旧是难题之一，常见问题包括AI对手指处理不准确，导致手指黏连或数量异常（4指、6指）等。虽然已有很多方式面部和手部修复处理，如：adetailer、HandRefiner等；面部修复问题基本解决，但是手部仍不完美，特别是手部褶皱感。因此笔者将在本文介绍一种高效的快速后期处理方案：krita-ai-diffusionAI智能绘图工具结合ComfyUI，这是一款Krita绘图软件的生成式AI智能插件。当然krita-ai-diffusion修手仍然也需要大量抽卡，不过它可以通过方便快捷的使用体验，以及调整seed种子和strength强度加速修手抽卡的成功率。

krita与krita-ai-diffusion安装

在开始修手之前，首先需要下载Krita绘图软件并安装，这是一款开源免费的软件，因此我们可以自由本地部署和使用。下载地址为：https://krita.org/zh-hk/download/ 。

然后，我们还需要下载对应的生成式AI智能插件krita-ai-diffusion，下载地址为：https://github.com/Acly/krita-ai-diffusion/releases/tag/v1.18.1。下载完后需要解压压缩文件，并将其拷贝到本地：C:\Users\[用户名]\AppData\Roaming\krita\pykrita目录下，请将这里用户名改为本地登录主机用户名（笔者为admin）。

然后打开刚安装的Krita软件，打开菜单设置Setting->Configure Krita->Python Plugin Manager，勾选上AI Image Diffusion选项。然后，重启Krita软件，并拖拽打开需要修手的图像。

在菜单Setting->Dockers->AI Image Generation，勾选该菜单，就可以在窗口界面看见AI Image Generation工具箱了。首次打开，需要点击Configure按钮打开设置框设置运行的SD模型配置。在这里既支持本地直接不是SD模型使用，也支持远程模型生成、以及直接已有的本地ComfyUI软件。在这里笔者使用的是ComfyUI软件。注意首先需要启动ComfyUI并设置API端口：127.0.0.1:8188,并点击connect连接测试。

首次连接一定是会失败的，因为我们还需要安装一些ComfyUI插件和模型下载才能工作

• 需要安装模型下载说明文档可文末自行扫描获取（这里可以通过点击connect按钮一步一步通关，软件使用体验做的很好，每次报错会说明缺失模型，以及下载文档地址）

在这里也可以增加自定义模型，笔者使用的是AWPortrait模型，该模型为SD1.5模型，是一款优秀真人写实摄影模型。模型下载地址为：

AWPortrait（修手模型）

• kimchiMix（绘图模型）

ComfyUI与Krita修手体验

如果你顺利完成上面的安装步骤，现在就可以进入修手体验环节了。首先拖拽一副需要修手的图像打开 krita编辑器，并利用区域选择器（这里支持矩形、椭圆形、多边形区域选择），选择需要修手的部分。然后点击AI Image Diffusion工具中Live选项并启动服务，然后调整Seed种子和strength强度，开始局部生成手部图片。在这过程中不能一步到位，而是适当选择满足修复方向的手势替换原图，在进行第二次修手，这样经过多轮的修复直到达到满意的手部姿势为止。其中也需要适当调整strength强度，以便于快速寻找到修正方向。

ComfyUI与Krita修手演示案例

在这里可以同时结合SD-WebUI局部重绘实现整体修正。对于大面积修复使用SD-WebUI，局部细节如手指采用ComfyUI与Krit修复。对于使用ComfyUI与Krita修复，注意调整强度值，初期与期望相差较大时候，可加强强度值快速得到修正方向。当确定方向并且接近期望时，则降低强度值稳定整体姿势重复抽卡修复。

可以清晰的看到修复后的手光滑度，没有褶皱痕迹。
在这里插入图片描述