ComfyUI

文章目录

    • 一、关于 ComfyUI
      • 特点
      • 快捷键
      • QA
        • 你为什么做这个?
        • 这是给谁的?
    • 二、安装
      • 1、Windows
        • 直接链接下载
        • 如何在另一个UI和ComfyUI之间共享模型?
      • 2、Jupyter Notebook
      • 3、手动安装(Windows、Linux)
        • AMD GPU(仅Linux)
        • Nvidia
          • 故障排除
        • 依赖
        • 其他:
          • 英特尔GPU
          • Apple Mac silicon
          • DirectML(Windows上的AMD卡)
    • 三、运行
      • 对于ROCm官方不支持的AMD卡
    • 四、笔记
      • 如何展示高质量的预览?
      • 如何使用TLS/SSL?


一、关于 ComfyUI

  • github : https://github.com/comfyanonymous/ComfyUI
  • 矩阵空间:#comfyui_space:matrix.org : https://app.element.io/#/room/%23comfyui_space%3Amatrix.org (类似 discord 但开源)。

ComfyUI 是最强大和模块化的stable diffusion GUI和后端。

在这里插入图片描述

此用户界面将允许您使用基于图形/节点/流程图的界面设计和执行高级stable diffusion 管道。

有关一些工作流程示例并查看ComfyUI可以做什么,您可以查看:

  • ComfyUI示例 : https://comfyanonymous.github.io/ComfyUI_examples/
  • 安装ComfyUI : https://github.com/comfyanonymous/ComfyUI#installing

特点

  • 节点/图形/流程图界面,用于试验和创建复杂的stable diffusion 工作流程,而无需编写任何代码。
  • 全面支持SD1. x、SD2.x、SDXL、Stable Video Diffusion、Stable Cascade和SD3
  • 异步队列系统
  • 许多优化:仅重新执行在执行之间更改的工作流部分。
  • 命令行选项:--lowvram使其在小于3GB vram的GPU上工作(在vram较低的GPU上自动启用)
  • 即使你一个GPU也没有,也可以运行,使用:--cpu(慢)
  • 可以加载ckpt、安全传感器和扩散器模型/检查点。独立的VAE和CLIP模型。
  • 嵌入/文本倒置
  • Loras(常规、locon和loha)
  • Hypernetworks
  • 从生成的PNG文件加载完整的工作流(带有种子)。
  • 将工作流保存/加载为Json文件。
  • 节点接口可用于创建复杂的工作流,如Hires修复或更高级的工作流。
  • 面积构成
  • 修复与常规和修复模型。
  • ControlNet 和 T2I-Adapter
  • 高级模型(ESRGAN、ESRGAN变体、SwinIR、Swin2SR等…)
  • unCLIP模型
  • GLIGEN
  • 模型合并
  • LCM模型 和 Loras
  • SDXL涡轮增压
  • 潜在预览与TAESD
  • 启动得很快。
  • 完全离线工作:永远不会下载任何东西。
  • 配置文件来设置模型的搜索路径。

工作流示例可以在示例页面 查看。


快捷键

对于macOS用户,Ctrl也可以替换为Cmd

键绑定说明
Ctrl+Enter将当前图形排队生成
Ctrl+Shift+Enter将当前图形作为第一个排队生成
Ctrl+Z/Ctrl+Y撤消/重做
Ctrl+S保存工作流
Ctrl+O加载工作流
Ctrl+A选择所有节点
Alt+C折叠/解折叠选定节点
Ctrl+M静音/取消静音选定节点
Ctrl+B旁路选定节点(就像节点从图形中删除,电线通过重新连接一样)
删除/退格删除选定节点
Ctrl+退格删除当前图形
空间按住画布并移动光标时移动画布
Ctrl/Shift+单击将单击的节点添加到选择
Ctrl+C/Ctrl+V复制和粘贴选定节点(不保持与未选择节点的输出)
Ctrl+C/Ctrl+Shift+V复制和粘贴选定节点(保持从未选择节点的输出到粘贴节点的输入的连接)
Shift+Drag同时移动多个选定节点
Ctrl+D加载默认图形
Alt++画布放大
Alt+-画布缩小
Ctrl+Shift+LMB+垂直拖动画布放大/缩小
Q切换队列的可见性
H切换历史可见性
R刷新图形
双击LMB打开节点快速搜索调色板

QA


你为什么做这个?

我想详细了解stable diffusion 是如何工作的。我还想要一些干净而强大的东西,让我不受限制地试验SD。


这是给谁的?

这适用于任何想要使用SD制作复杂工作流程或想要了解更多SD工作原理的人。
界面密切关注SD的工作原理,代码应该比其他SD UI更容易理解。


二、安装


1、Windows

有一个适用于Windows的可移植独立版本,应该适用于在Nvidia GPU上运行或仅在发布页面上运行在CPU上。


直接链接下载

https://github.com/comfyanonymous/ComfyUI/releases/download/latest/ComfyUI_windows_portable_nvidia_cu121_or_cpu.7z

只需下载,用7-Zip提取并运行。确保你把你的stable diffusion checkpoints/models (巨大的 ckpt/safetensors 文件)放在: ComfyUI\models\checkpoints

如果您无法提取它,右键单击 文件 --> 属性 --> 解除屏蔽


如何在另一个UI和ComfyUI之间共享模型?

请参阅配置文件以设置模型的搜索路径。在独立窗口构建中,您可以在ComfyUI目录中找到此文件。

将此文件重命名为 extra_model_paths. yaml 并使用您喜欢的文本编辑器 对其进行编辑。


2、Jupyter Notebook

要在纸质空间、kaggle 或 colab 等服务上运行它,你可以使用我的Jupyter笔记本 : https://github.com/comfyanonymous/ComfyUI/blob/master/notebooks/comfyui_colab.ipynb


3、手动安装(Windows、Linux)

Git克隆这个repo。

将您的SD checkpoints(巨大的 ckpt/safetensors 文件)放入 : models/checkpoints

将您的VAE放入:models/vae


AMD GPU(仅Linux)

如果您还没有安装,AMD用户可以使用pip安装rocm和pytorch,这是安装稳定版的命令:

pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/rocm6.0

这是使用ROCm 6.0 安装夜间的命令,它可能会有一些性能改进:

pip install --pre torch torchvision torchaudio --index-url https://download.pytorch.org/whl/nightly/rocm6.1

Nvidia

Nvidia用户应使用以下命令 安装稳定的pytorch:

pip install torch torchvision torchaudio --extra-index-url https://download.pytorch.org/whl/cu121

这是每晚安装pytorch的命令,它可能会提高性能:

pip install --pre torch torchvision torchaudio --index-url https://download.pytorch.org/whl/nightly/cu124

故障排除

如果您收到“未在启用CUDA的情况下编译Torch”错误,请使用以下方式卸载torch:

pip uninstall torch

并使用上面的命令再次安装它。


依赖

通过在ComfyUI文件夹中打开您的终端来安装依赖项,然后:

pip install -r requirements.txt

在此之后,您应该已经安装了所有内容,并且可以继续运行ComfyUI。


其他:

英特尔GPU

英特尔GPU支持适用于英特尔Pytorch扩展(IPEX)支持的所有英特尔GPU,支持安装页面中列出的支持要求。选择您的平台和安装方法,并按照说明进行操作。步骤如下:

  1. 首先安装上面链接的IPEX安装页面中列出的或更新的驱动程序或内核,如果需要Linux。
  2. 按照说明为您的平台安装英特尔的oneAPI Basekit。
  3. 使用平台安装页面中提供的说明安装IPEX软件包。
  4. 按照适用于Windows和Linux的ComfyUI手动安装说明,并在安装所有内容后如上所述正常运行ComfyUI。

更多的讨论和帮助可以在这里找到。


Apple Mac silicon

您可以使用任何最新的macOS版本在Apple Mac芯片(M1或M2)中安装ComfyUI。

  1. 每晚安装pytorch。有关说明,请阅读Mac Apple开发人员指南上的加速PyTorch培训(确保每晚安装最新的pytorch)。
  2. 按照Windows和Linux的ComfyUI手册安装说明进行操作。
  3. 安装ComfyUI依赖项。如果您有另一个stable diffusion 用户界面,您可能能够重用这些依赖项。
  4. 启动ComfyUI通过运行python main.py

注意:请记住将您的模型、VAE、LoRA等添加到相应的Comfy文件夹中,如ComfyUI手动安装中所述。


DirectML(Windows上的AMD卡)
pip install torch-directml`然后你可以用:`python main.py --directml

我已经安装了另一个用于stable diffusion 的UI,我真的必须安装所有这些依赖项吗?

你不知道。如果您安装了另一个UI并使用它自己的python venv,您可以使用该venv运行ComfyUI。您可以打开您最喜欢的终端并激活它:

source path_to_other_sd_gui/venv/bin/activate

或在Windows上:

使用Powershell:"path_to_other_sd_gui\venv\Scripts\Activate.ps1"

使用cmd. exe:"path_to_other_sd_gui\venv\Scripts\activate.bat"

然后您可以使用该终端运行ComfyUI,而无需安装任何依赖项。请注意,venv文件夹可能会被称为其他名称,具体取决于SD UI。

三、运行

python main.py

对于ROCm官方不支持的AMD卡

如果您有问题,请尝试使用此命令运行它:

对于6700、6600和其他RDNA2或更早版本:

HSA_OVERRIDE_GFX_VERSION=10.3.0 python main.py

对于AMD 7600和其他RDNA3卡:

HSA_OVERRIDE_GFX_VERSION=11.0.0 python main.py

四、笔记

仅执行具有所有正确输入的输出的图形部分。

只有图中从每次执行到下一次更改的部分将被执行,如果您两次提交相同的图,只有第一个将被执行。如果您更改了图的最后一部分,只有您更改的部分和依赖于它的部分将被执行。

在网页上拖动生成的png 或加载一个png 将为您提供完整的工作流程,包括用于创建它的种子。

您可以使用 ()来更改单词或短语的重点,例如:(good code:1.2)(bad code:0.8)

()的默认重点是1.1。在实际提示中使用()字符可以逃逸它们,例如 (

对于通配符/动态提示,您可以使用{day|night}。使用此语法,每次对提示进行排队时,前端都会将“{Wild|card|test}”随机替换为“野生”、“卡”或“测试”。在实际提示中使用{}字符逃逸它们,如:{}

动态提示也支持C风格的注释,如 // comment /* comment */

要在文本提示中使用文本反转概念/嵌入,请将它们放在模型/嵌入目录中,并在CLIPTextEncode节点中使用它们,如下所示(您可以省略 .pt 扩展名):

embedding:embedding_filename.pt

如何展示高质量的预览?

使用--preview-method auto启用预览。

默认安装包括低分辨率的快速潜在预览方法。要使用TAESD启用更高质量的预览,请下载taesd_decoder. pth(用于SD1.x和SD2.x)和taesdxl_decoder.pth(用于SDXL)模型,并将它们放在models/vae_approx文件夹中。安装后,重新启动ComfyUI以启用高质量预览。


如何使用TLS/SSL?

通过运行以下命令生成自签名证书(不适用于共享/生产使用)和密钥:

openssl req -x509 -newkey rsa:4096 -keyout key.pem -out cert.pem -sha256 -days 3650 -nodes -subj "/C=XX/ST=StateName/L=CityName/O=CompanyName/OU=CompanySectionName/CN=CommonNameOrHostname"

使用--tls-keyfile key.pem --tls-certfile cert.pem启用TLS/SSL,该应用程序现在可以访问https://... 而不是 http://...

注意:Windows用户可以使用alexisrolland/docker-openssl 或 第3方二进制发行版 之一来运行上面的命令示例。

如果使用容器,请注意卷挂载-v可以是相对路径,因此... -v ".\:/openssl-certs" ... 将在命令提示符 或 powershell终端的当前目录中 创建密钥和证书文件。


2024-06-14(五)

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/715036.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

2024年黑龙江省特岗招聘公告出了!!!

2024年黑龙江省农村义务教育阶段学校特设岗位教师招聘822人公告 (1、网上报名 时间:6月17日9:00—6月22日17:00。 网址: https://sfyz.hljea.org.cn:7006/tgjs 2、网上资格审查 资格审查时间:6月…

时间卷积网络与膨胀卷积:深入理解其原理与应用

TCN, Temporal Convolutional Networks 时间卷积网络与膨胀卷积:深入理解其原理与应用一、时间卷积网络(TCN)简介二、膨胀卷积的核心概念1. **膨胀卷积(Dilated Convolution)**2. **Kernel(卷积核&#xff…

js 前端 Function.prototype.call.call(0[‘toString‘], *, 16)

这个函数将 数组转任意进制 Function.prototype.call.call(0[toString], *, 16)

计算机组成原理之定点运算器的组成

文章目录 定点运算器的组成逻辑运算ALU两级先行进位的ALU 总线单总线结构双总线结构三总线结构 定点运算器的组成 逻辑运算 总的来说,逻辑非运算就是按位取反;逻辑加运算就是按位取或运算;逻辑乘运算就是按位取和运算;逻辑异运算…

2-6 基于matlab2018B的语音信号降噪和盲源分离GUI界面

基于matlab2018B的语音信号降噪和盲源分离GUI界面,包括维纳滤波,小波降噪、高通、低通、带通滤波,及提出的滤波方法。每个功能均展示降噪前后声音效果并外放出来。程序已调通,可直接运行。 2-6 语音信号降噪 盲源分离 GUI界面 - 小…

UML相关2

内容 说明 用例编号 UC-1 用例名称 客户注册 用例说明 客户参与者通过注册获得进入彬使用系统的权限 参与者 客户 前置条件 无 后置条件 系统正确接收用户信息并保存到数据库 基本路径 发布注册申请系统显示注册页面客户填写相应信息并提交注册成功后可以进行其…

贷款投资决策和常用财务函数

前段时间上了一门excel操作的课,本文结合其中介绍财务函数以及投资决策分析相关的部分,对贷款中的现金流计算进行深入的分析。 以等额本息产品为例进行实操计算,假设某产品本金12000元,期限12,IRR利率24%。每期还款113…

生信分析进阶5 - 全外显子组变异检测和ANNOVAR注释Snakemake分析流程

基于yaml或ini配置文件,配置文件包含例如样本名称、参考基因组版本、exon capture bed文件路径、参考基因组路径和ANNOVAR注释文件等信息。 基于该流程可以实现全外显测序的fastq文件输入到得到最终变异VCF文件。 1. Snakemake分析流程基础软件安装 # conda安装 …

面试题 17.17. 多次搜索

链接&#xff1a;. - 力扣&#xff08;LeetCode&#xff09; 题解&#xff1a; class Solution { private:struct Trie {Trie() {end false;index -1;next.resize(26);}bool end;int index;std::vector<std::unique_ptr<Trie>> next;};void insert_trie(int in…

C++编程:vector容器的简单模拟实现

前言&#xff1a; 在C标准库&#xff08;STL&#xff09;中&#xff0c;vector容器是最常见使用的动态数组。它结合了链表与数组的优点&#xff0c;提供了灵活的大小调整与高效的随机访问。本文将简单的对vector容器进行介绍并且对vector容器简单的模拟实现。 一、vector的文…

web前端:作业三

1.回到顶部案例(固定定位) <!DOCTYPE html> <html><head><meta charset"utf-8"><title></title><style>#container{height: 5000px;border: 1px solid blue;}#back-button{width: 100px;height: 100px;border: 1px solid…

Redis分布式锁的实现、优化与Redlock算法探讨

Redis分布式锁最简单的实现 要实现分布式锁,首先需要Redis具备“互斥”能力,这可以通过SETNX命令实现。SETNX表示SET if Not Exists,即如果key不存在,才会设置它的值,否则什么也不做。利用这一点,不同客户端就能实现互斥,从而实现一个分布式锁。 举例: 客户端1申请加…

比亚迪智驾技术震撼登场!L3级自动驾驶领跑全国,无图导航、夜间挑战轻松应对!

作为新能源汽车领域的翘楚&#xff0c;比亚迪在电池技术与智能驾驶方面都有着卓越的表现。近日&#xff0c;比亚迪凭借其领先的智驾技术&#xff0c;成功入选全国首批L3级自动驾驶上路及行驶试点名单&#xff0c;这无疑将推动智驾技术的普及速度。 你知道吗&#xff1f;比亚迪智…

Elasticsearch 认证模拟题 - 22

一、题目 索引 task 索引中文档的 fielda 字段内容包括了 hello & world&#xff0c;索引后&#xff0c;要求使用 match_phrase query 查询 hello & world 或者 hello and world 都能匹配该文档 1.1 考点 分词器 1.2 答案 # 创建符合条件的 task 索引&#xff0c;…

SM2加密算法的公私钥和密文格式以及不同编程语言之间无法互相解密问题分析

1 文章介绍 本文章主要介绍了SM2加密算法的公钥、私钥和密文格式,以及对于不同编程语言之间无法互相解密问题进行了分析和处理。2 SM2加密算法格式 SM2在线加解密测试2.1 公钥格式 SM2公钥是SM2曲线上的一个点,由横、纵坐标两个分量来表示,简记为Q,每个分量长度为256位,即…

Apipost模拟HTTP客户端

模拟HTTP客户端的软件有很多&#xff0c;其中比较著名的就有API-FOX、POSTMAN。 相信很多小伙伴都使用POSTMAN。这篇博客主要介绍Apipost的原因是&#xff0c;Apipost无需下载&#xff0c;具有网页版。 APIFOX的站内下载&#xff1a; Api-Fox&#xff0c;类似于PostMan的软件…

[力扣二叉树]本地调试环境指导手册

以236. 二叉树的最近公共祖先为例子 本地编译软件为Viusal Studio 2022 写代码 项目里文件位置 CreateTree.h #pragma once #ifndef CLIONPROJECT_LEETCODECREATETREE_H #define CLIONPROJECT_LEETCODECREATETREE_H #include<vector> #include<queue> using na…

Java语法和基本结构介绍

Java语法和基本结构是Java编程的基础&#xff0c;它决定了Java代码的书写方式和程序的结构。以下是Java语法和基本结构的一些关键点&#xff1a; 1.标识符和关键字&#xff1a;Java中的标识符是用来标识变量、函数、类或其他用户自定义元素的名称。关键字是预留的标识符&#x…

【Netty】ByteBuffer原理与使用

Buffer则用来缓冲读写数据&#xff0c;常见的buffer有&#xff1a; ByteBuffer MappedByBuffer DirectByteBuffer HeapByteBuffer hortBuffer IntBuffer LongBuffer FloatBuffer DoubleBuffer CharBuffer 有一个普通文本文件data.txt,内容为&#xff1a; 1234567890a…

Spring Boot实战:图书信息网站

实战概述&#xff1a;Spring Boot图书信息网站开发 项目背景 随着数字化时代的到来&#xff0c;图书信息网站为用户提供了一个便捷的在线浏览和购买图书的平台。本实战项目旨在通过Spring Boot框架开发一个图书信息网站&#xff0c;实现图书展示、用户登录和管理等功能。 项…