ComfyUI使用Flux模型

news2024/9/19 10:42:44

ComfyUI是一个强大的用户界面,支持多种图像处理和生成模型,而Flux是一系列由Black Forest Labs开发的扩散模型。

准备工作

1. 下载所需文件

下载地址:

comfyanonymous/flux_text_encoders at main (hf-mirror.com)icon-default.png?t=N7T8https://hf-mirror.com/comfyanonymous/flux_text_encoders/tree/mainblack-forest-labs/FLUX.1-schnell at main (hf-mirror.com)icon-default.png?t=N7T8https://hf-mirror.com/black-forest-labs/FLUX.1-schnell/tree/mainblack-forest-labs/FLUX.1-dev at main (hf-mirror.com)icon-default.png?t=N7T8https://hf-mirror.com/black-forest-labs/FLUX.1-dev/tree/main首先,确保已经下载并准备好以下文件:

  • t5xxl_fp16.safetensors 或 t5xxl_fp8_e4m3fn.safetensors:这些文件用于CLIP模型,放置在ComfyUI/models/clip/目录中。如果RAM超过32GB,推荐使用fp16版本以获得更好的质量。
  • VAE:变分自编码器模型文件,放置在ComfyUI/models/vae/目录下。
  • Flux Dev 和 Flux Schnell:这些模型权重文件放置在ComfyUI/models/unet/目录下。

2. 解决内存不足问题

如果在运行过程中遇到内存不足的问题,可以尝试以下方法:

  • 使用单文件fp8版本,这将减少内存使用量。
  • 在“Load Diffusion Model”节点中设置weight_dtype为fp8,这将内存使用量减半,但可能会轻微降低质量。

使用Flux Dev和Flux Schnell

1. Flux Dev

  • 将下载的flux1-dev.safetensors文件放入ComfyUI/models/unet/目录中。
  • 在ComfyUI中加载或拖拽提供的图像来获取工作流: https://comfyanonymous.github.io/ComfyUI_examples/flux/flux_dev_example.png

2. Flux Schnell

  • 将下载的Flux Schnell模型权重文件放入ComfyUI/models/unet/目录中。
  • 在ComfyUI中加载或拖拽提供的图像来获取工作流: https://comfyanonymous.github.io/ComfyUI_examples/flux/flux_schnell_example.png

使用FP8 版本

模型下载地址:

Kijai/flux-fp8 at main (hf-mirror.com)icon-default.png?t=N7T8https://hf-mirror.com/Kijai/flux-fp8/tree/main

1. Flux Dev

  • 下载易于使用的flux1-dev-fp8.safetensors文件,并将其放入ComfyUI/models/unet/目录中。
  • 在“Load Diffusion Model”节点中设置weight_dtype为fp8,这将内存使用量减半,但可能会轻微降低质量。
  • 在ComfyUI中加载或拖拽提供的图像来获取工作流。

2. Flux Schnell

  • 下载Flux Schnell模型权重文件,并将其放入ComfyUI/models/unet/目录中。
  • 在“Load Diffusion Model”节点中设置weight_dtype为fp8,这将内存使用量减半,但可能会轻微降低质量。
  • 在ComfyUI中加载或拖拽提供的图像来获取工作流。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2092239.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

django企业开发实战-学习小结

写在前面 初次阅读此书是三年前,当时没经历过完整的项目 觉得这书就是扯淡 后来经历过项目加班与毒打 今天再翻开此书 觉得实乃不可多得之物 花些时间啃下来吧 需求 需求文档 写文档,列举需要实现的功能,详细列举,不考虑技术实…

Leetcode Hot 100刷题记录 -Day6(滑动窗口)

无重复字符的最长子串 问题描述: 给定一个字符串 s ,请你找出其中不含有重复字符的 最长子串的长度。 示例 1: 输入: s "abcabcbb" 输出: 3 解释: 因为无重复字符的最长子串是 "abc",所以其长度为 3。示例 2: 输入: s …

10:Logic软件原理图中添加电源与GND

Logic软件原理图中添加电源与GND

“品牌VS套路:华为、格行、中兴随身WiFi谁才是真良心?“

咱们打工人月末有三光,工资花光,流量用光,话费剩光光。 不过除了工资没办法解决,剩下两个还能抢救一下 提起这个事情的起因是我发现现在的互联网平台到处都是推销随身WiFi的,什么零月租、几百G流量不限速不限量啥的&…

Cortex-A7支持的内存类型详解及配置举例

0 参考资料 Introduction to memory protection unit management on STM32 MCUs.pdf ARM ArchitectureReference Manual ARMv7-A and ARMv7-R edition.pdf 1 Cortex-A7支持的内存类型详解 1.1 内存类型 ARM架构处理器支持的内存类型分为三种,分别是Normal memory&…

airflow看不到任务日志解决方案

1. 基础信息 airflow 版本:2.5.3 2. 问题现象 airflow web-server 界面,看到某些任务的具体运行日志,只有少量日志,如下图所示: 具体日志内容如下: na-fudao-data-airflow-test-2-21.alibji.zybang.com…

某视频云平台存在未授权窃取用户凭据漏洞

我和你一样,历经破碎、痛苦的生活,却未垮掉,每一日都从承受的苦难中,再一次将额头浸入光明 漏洞详情: 某视频云平台存在未授权访问漏洞,攻击者可以直接访问平台的API接口文档,从而获取系统的A…

【大模型】Reflextion解读

前言:一种大模型强化学习技术,将传统的梯度更新时的参数信号替换成上下文的语言总结,过程和人类反思相似。区别与RLHF,Reflextion是agent自我反思,RLHF是人类反馈。 目录 1. 基础知识1.1 强化学习1.2 大模型Agent 2. 创…

Upload-LABS通关攻略【1-20关】

Pass-01 第一关是前端JS绕过 上传一个php文件显示只能上传特定后缀名的文件 这里将1.php改为1.jpg直接进行抓包,在数据包中将jpg改为php放行 文件上传成功,邮件图片新建页面打开 可以访问到1.php文件,则一句话密码上传成功 使用蚁剑 进行连接…

探秘DevSecOps黄金管道,安全与效率的完美融合

软件应用的安全性已成为企业和用户关注的焦点,DevSecOps作为一种将安全融入开发和运维全过程的理念和实践,旨在消除传统开发模式中安全被后置处理的弊端。DevSecOps黄金管道(Golden Pipeline)是实现这一理念的核心框架&#xff0c…

蜂鸣器奏乐

一、粗略了解简谱 拍号:如图,“2”表示一个小节有2拍,“4”表示4分音符为一拍 终止线表示歌曲结束 注意:以下音符都按以四分音符为一拍计算拍数 四分音符: 唱一拍 二分音符: 某一个音右边有一个小横线&…

OpenAI GPT3 Search API not working locally

题意:"OpenAI GPT-3 搜索 API 在本地无法工作" 问题背景: I am using the python client for GPT 3 search model on my own Jsonlines files. When I run the code on Google Colab Notebook for test purposes, it works fine and returns …

文件上传漏洞详解(持续更新…)

第一关 步骤一,打开第一关先点击浏览上传一个jpg格式的图片 步骤二,打开BP修改jpg为php然后放包 步骤三,右键打开图像 成功解析 步骤四,打开蚁剑 第一关还是蛮简单的 第二关 步骤一,打开第二关先点击浏览上传一个j…

leetcode637. 二叉树的层平均值,广度优先搜索BFS

leetcode637. 二叉树的层平均值 给定一个非空二叉树的根节点 root , 以数组的形式返回每一层节点的平均值。与实际答案相差 10-5 以内的答案可以被接受。 给定一个非空二叉树的根节点 root , 以数组的形式返回每一层节点的平均值。与实际答案相差 10-5 以内的答案可以被接受。…

跑通llama-factory

1.在ubuntu下安装环境 git clone --depth 1 https://github.com/hiyouga/LLaMA-Factory.git cd LLaMA-Factory pip install -e “.[torch,metrics]” pip install --no-deps -e . 在本地windows,打开http://0.0.0.0:7863/,总是显示无法打开界面。 之后在…

!!学习整理知识模块——关于【如何本地搭建Whisper语音识别模型】/请按需收藏!!

成长路上不孤单😊【14后,C爱好者,持续分享所学,如有需要欢迎收藏转发😊😊😊😊😊😊😊!!!!&#xff…

经验风险最小化和极大似然估计的关系

一、经验风险定义 给定一个训练数据集 T { ( x 1 , y 1 ) , ( x 2 , y 2 ) , . . . , ( x N , y N ) } T\{(x_1,y_1),(x_2,y_2),...,(x_N,y_N)\} T{(x1​,y1​),(x2​,y2​),...,(xN​,yN​)},模型f(X)关于训练数据集的平均损失称为经验风险(Empirical…

冻死你都觉得简单

小说大纲 标题:《学霸的豪门对决》 背景设定: 两个家族在商业界拥有举足轻重的地位,但因为历史原因,两家长期处于竞争状态。主角们在顶级私立学校就读,既是学霸也是家族的继承人。 主要人物: 男主角&a…

【前端开发必备小技巧】前端代码规范Vue篇

文章目录 🟢 前端代码规范🟢 一、前端代码规范Vue篇👉1、Vue编码基础👉1.1、组件规范👉1.2、模板中使用简单的表达式👉1.3、指令都使用缩写形式👉1.4、 标签顺序保持一致👉1.5、必须…

<数据集>车辆识别数据集<目标检测>

数据集格式:VOCYOLO格式 图片数量:3002张 标注数量(xml文件个数):3002 标注数量(txt文件个数):3002 标注类别数:21 标注类别名称:[ambulance, army vehicle, auto rickshaw, bicycle, bus, car, garba…