flux模型的下载、配套及简易使用记录(ubuntu)

ops/2024/12/22 14:54:43/

我在学习使用时,很迷惘各个模型放在什么 位置。以及他们的作用。所以系统的了解了一下。然后记录了,一下,希望能帮助到想了解这个知识的朋友。

另外,我将持续的更新这个专辑。记录我在学习和使用过程中关于comfy的方面。希望得到你的关注。及关注这个专辑。

因本地显卡6G  小,所以只能从小的方面入手。

另外,移动模型到相应文件夹后,必要时,重启comfyui.

老时出错,建议使用

1.使用 1-dev 模型,下载地址

魔搭社区

安装位置 unet

必须使用 对应的vae

对于 Flux1 dev 对应的 VAE 模型,你需要下载 `ae.safetensors` 文件,并将其放置在 `ComfyUI/models/vae` 目录下,建议重命名为 `flux_ae.safetensors`。

具体步骤如下:
1. 下载 Flux1 dev 模型,并将模型文件放置在 `ComfyUI/models/unet` 目录下。
2. 下载 VAE 模型 `ae.safetensors`,并放在 `ComfyUI/models/vae` 目录下,建议重命名为 `flux_ae.safetensors`。

确保所有模型文件都正确放置后,你就可以运行相应的工作流了。

2.fp8模型:flux1 dev fp8

对于 Flux1 dev fp8 模型的本地安装位置,以下是具体的放置路径:

1. **大模型文件(flux1-dev-fp8)**:下载的 `flux1-dev-fp8.safetensors` 文件应放置在 `ComfyUI/models/unet/` 目录下。

2. **CLIP 模型文件**:下载的 `t5xxl_fp8_e4m3fn.safetensors`(或 `t5xxl_fp16.safetensors`,根据显存选择)和 `clip_l.safetensors` 文件应放置在 `ComfyUI/models/clip/` 目录下。

3. **VAE 模型文件**:下载的 `ae.safetensors` 文件应放置在 `ComfyUI/models/vae/` 目录下。

请确保所有下载的模型文件都放置在正确的目录中,以便 ComfyUI 能够正确加载和使用这些模型。

3.flux1 schnell fp8

支持四步成图,速度快。

对于 Flux1 Schnell FP8 模型的本地安装,你需要将下载的模型文件放置在以下位置:

1. **大模型**:将 `flux1-schnell-fp8.safetensors` 文件放置在 `ComfyUI/models/unet/` 目录下。
2. **VAE 模型**:下载 `ae.safetensors` 文件,并放置在 `ComfyUI/models/vae/` 目录下。
3. **CLIP 模型**:下载 `t5xxl_fp8_e4m3fn.safetensors` 和 `clip_l.safetensors` 文件,放置在 `ComfyUI/models/clip/` 目录下。

确保所有模型文件都正确放置后,你就可以运行相应的工作流了 。

4.nf4模型,整合了vae clip

位置:checkpoints

需要:nf4模型加载节点。

对于 Flux NF4 模型,主要有以下几种:

1. **Flux.1 Dev BNB NF4 V1**
2. **Flux.1 Dev BNB NF4 V2**(推荐使用此版本,效果更好)

### 本地安装位置
将下载的模型文件放置在以下目录中:

- **大模型文件**:将 `flux1-dev-bnb-nf4-v2.safetensors` 文件放置在 `ComfyUI/models/checkpoints/` 目录下。
- **插件**:需要安装 `ComfyUI_bitsandbytes_NF4` 插件,确保模型能够正常加载。

确保所有文件都正确放置后,你就可以在 ComfyUI 中使用这些 NF4 模型了。

5.gguf,根据显存选择

位置:checkpoints

Flux GGUF 模型有多个版本,以下是一些主要的模型及其安装位置:

1. **Flux.1 Dev GGUF**:这是 Flux 的一个主要 GGUF 版本模型。
2. **Flux.1 Schnell GGUF**:这是蒸馏版模型的量化版本,适合显存较小的用户。
3. **Flux.1 Fill GGUF**:用于局部重绘的模型。
4. **Flux.1 Canny GGUF**:用于边缘检测的模型。
5. **Flux.1 Depth GGUF**:用于深度图控制的模型。

### 本地安装位置

- **GGUF 模型文件**:下载的 `.gguf` 文件应放置在 `ComfyUI/models/unet` 目录中。
- **T5-XXL 编码器模型**:量化的 T5-XXL 模型应放置在 `ComfyUI/models/clip` 目录中。
- **VAE 模型文件**:`ae.safetensors` 文件应放置在 `ComfyUI/models/vae` 目录中,并建议重命名为 `flux_ae.safetensors`。

请确保所有模型文件都正确放置后,你就可以在 ComfyUI 中使用这些 GGUF 模型了。

使用记录:

6.使用flux模型时要用到clip模型

位置:clip

对于 Flux CLIP 模型,主要有以下几种:

1. **clip_l.safetensors**:这是标准的 CLIP 模型,适用于大多数情况,尤其是在需要高质量文本到图像的转换时。
2. **t5xxl_fp16.safetensors**:适合于具有 32GB 以上内存的系统,提供更高的性能和质量。
3. **t5xxl_fp8_e4m3fn.safetensors**:适合于显存较小(低于 32GB)的系统,能有效减少内存使用。

### 本地安装位置
将这些模型文件放置在以下目录中:

- **CLIP 模型文件**:将 `clip_l.safetensors`、`t5xxl_fp16.safetensors` 或 `t5xxl_fp8_e4m3fn.safetensors` 文件放置在 `ComfyUI/models/clip` 目录下。

### 使用场景
- **clip_l.safetensors**:用于一般的图像生成任务,适合大多数用户。
- **t5xxl_fp16.safetensors**:在高性能计算环境中使用,适合需要处理复杂任务的用户。
- **t5xxl_fp8_e4m3fn.safetensors**:当系统内存有限时使用,能够有效降低显存占用,同时保持较好的生成质量。

确保所有模型文件都正确放置后,你就可以在 ComfyUI 中使用这些 CLIP 模型了。

以上,总会出现不一样的各类错误,自行调整即可。

不知怎么回事。


http://www.ppmy.cn/ops/144046.html

相关文章

SEO初学者-搜索引擎如何工作

搜索引擎基础搜索引擎是如何建立索引的搜索引擎如何对网页进行排名搜索引擎是如何个性化搜索结果的 搜索引擎的工作方式是使用网络爬虫抓取数十亿个页面。爬虫也称为蜘蛛或机器人,它们在网络上导航并跟踪链接以查找新页面。然后,这些页面会被添加到搜索引…

为markdown导出的pdf添加页眉页脚

为Markdown导出的PDF添加页眉页脚 环境 vscode扩展:Markdown PDF 操作方式 快捷键 Ctrl, 打开设置搜索 “markdown-pdf”找到设置 页眉: Markdown-pdf: Header Template页脚: Markdown-pdf: Footer Template 页眉插入示例内容: 此处使用base64内嵌…

指令-v-for的key

在Vue.js中,v-for指令用于循环渲染数组或对象的元素。在使用v-for指令时,需要提供一个唯一的key属性来帮助Vue.js跟踪每个元素的身份,以便在更新渲染时能够正确地复用和删除元素。 key属性在v-for循环中的作用主要有两个方面: 帮…

前端入门之VUE--ajax、vuex、router,最后的前端总结

前言 VUE是前端用的最多的框架;这篇文章是本人大一上学习前端的笔记;欢迎点赞 收藏 关注,本人将会持续更新。本人不是学前端的,这个是大一的时候上学的和做的笔记,那个时候学的也蒙,故这里对前端做一个总…

【漫话机器学习系列】016.误差中的偏差(BIAS)

误差中的偏差(Bias) 在统计学和机器学习中,误差可被分解为三部分:偏差(Bias)、方差(Variance)和噪声(Noise)。其中,偏差描述了模型预测值与真实值…

线性代数判断两条线方向相反(python)

以下是几种可以通过线性代数相关知识来判断两条线方向相反的方法,以下假设两条线都是二维平面上的线段,线 a 的端点坐标为 (x1_a, y1_a) 和 (x2_a, y2_a) ,线 b 的端点坐标为 (x1_b, y1_b) 和 (x2_b, y2_b) ,对应你给出的示例中 x…

纯血鸿蒙APP实战开发——Text实现部分文本高亮和超链接样式

介绍 本示例通过自定义Span类型,在Text组件中使用ForEach遍历,根据不同的Span类型生成不同样式和功能的Span组件,实现部分文本高亮和超链接。 效果图预览 使用说明 点击超链接,根据链接类型出现相应提示弹窗。长按消息卡片出现…

【1.排序】

排序 笔记记录 1.排序的基本概念1.1 排序的定义 2. 插入排序2.1 直接插入排序2.2 折半插入排序2.3 希尔排序 3. 交换排序3.1 冒泡排序3.2 快速排序 4. 选择排序4.1 简单选择排序4.2 堆排序 5. 归并排序、基数排序和计数排序5.1 归并排序4.2 基数排序4.3 计数排序 6. 各种内部排…