comfyui替换电商模特工作流，模特们要真的要失业了吗？

news2024/11/25 21:19:33

前言

comfyui生态的丰富绝对是电商行业的福利，有助于电商老板们开源节流，废话不多说本着追求进步进一步理解comfyui工作流的搭建逻辑，我们来拆解电商模特替换这个工作流！

老规矩一句话说工作流原理，1.借助XL-tile修改人物模特，2.借助image composition mask节点将生成的图像和原图像融合 3.借助inpainting model conditioning 对图像进行优化！

拓展内容：这里补充回顾一下tile的常见作用

1.修复损坏的图像，丰富图像新的细节

2.转换图像为任意风格

3.替换和修改图像里的任何内容，很显然我们这个工作流就用到了tile的这

个用法！

本文涉及的工作流和插件，需要的朋友请扫描免费获取哦~

一、搭建controlnet tile控制图生图工作流

这一步主要有三个分步骤

1、搭建基础文生图工作流

2、vae encode搭建适合于xl的图生图工作流

3.加装controlnet tile控制，**TTplanet tile guided filter!**这个节点为tile预处理器，TTplanet可以识别及以为一个小组名称TT兴趣团队！

其中Scaled Soft Weights 节点主要用于微调生成图像时的权重影响，通过调整这些参数，用户可以更精细地控制图像生成过程中的各种特定效果。

还有一个新的节点automatic cfg,Automatic CFG 节点是 ComfyUI 中的一个自动控制指导强度（CFG）设置工具，用于调整模型生成图像时的条件引导强度。以下是各个参数的作用解释：

这个节点我的理解大致为，自动控制CFG，让生成的图像更符合于提示词！

看看这一步的搭建的tile的效果：

a.西装换盔甲

b.白色衣服变印花衣服

二、搭建提示词翻译风格输入

这个比较简单用了要给argos translate text node翻译节点和sdxl prompt style!

三、实测换电商片模特

此时报错，因为生成的图像，不仅人物换了,产品也换了！

四、image composite mask节点解决报错

用这个节点的原理是将人物抠出来和原来的人物合并，对的，只是人物合并，图像合并后我们就会看到和左图一样的产品了！

其中source突出为刚才生成的图片即是上面图片右，destination目标图层为左图，即是被覆盖的图层，将要覆盖的图层。mask为选定出的人物图像！

到这一步我又会发现一个bug,就是因为图像结合后的图像会出现锯齿，这样的图像要去商用，估计老板只给二毛五，而且手部有重叠部分，所以我们要进一步对图像进行修补秀出锯齿！

五、inpainting model conditioning节点消除锯齿

这个时候我们需要用inpanting model conditioning节点对有锯齿和其他不和谐的地方进行修补，这个时候需要一个ksampler采样器，为了控制图像整体不变修改细节还需要加一个cn-tile.

这里我们需要注意inpaintmodel这个节点的mask部分就是我们需要修改的部分！

一般来说需要修改的部分有人物的轮廓部分，所以我们用outline mask标记出人物的轮廓部分，再用open maskeditor编辑器手动标出需要修改的部分，然后再用pixelwise（mask+mask)节点将遮罩相加，一并传入ksampler采样！因为cn-tile的加持下一般就会得到满意的效果！

当然有些时候，采样后产品会变这个时候我们需要再进行一次，image composite mask将生成的图像和参考图合并，最终选择合适的效果图！

为了帮助大家更好地掌握 ComfyUI，我在去年花了几个月的时间，撰写并录制了一套ComfyUI的基础教程，共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。