[AIGC] ComfyUI 节点解释_comfyui节点介绍-程序员宅基地

技术标签： AIGC

英文原文：https://aituts.com/comfyui/

我们如何了解实际发生的情况以便我们可以创建和修改工作流程？

要了解节点，我们必须了解一些稳定扩散的工作原理。

让我们看一下默认的工作流程。

如果您没有使用默认工作流程，或者您一直在搞乱界面，请单击右侧边栏上的“Load Default”。

Load Checkpoint Node

用于生成图像的 .safetensors 或 .ckpt 检查点模型有 3 个主要组件：

Unet：执行“扩散”过程，即我们称之为生成的图像的逐步处理
CLIP：将文本转换为Unet可以理解的格式
VAE：将图像从潜在空间解码到像素空间（当我们进行 img2img 时，也用于将常规图像从像素空间编码到潜在空间）

在 ComfyUI 工作流程中，这由 Load Checkpoint 节点及其 3 个输出表示（MODEL 指 Unet）。

在这里插入图片描述
这些输出连接到什么？

CLIP Text Encode Node

Load Checkpoint 节点的 CLIP 输出连接到 CLIP Text Encode 节点。

在这里插入图片描述
CLIP模型用于将文本转换为Unet可以理解的格式（文本的数字表示）。我们称这些为嵌入。

CLIP Text Encode 节点将检查点的 CLIP 模型作为输入，将提示（正向和负向）作为变量，执行编码过程，并将这些嵌入输出到下一个节点 KSampler。

KSampler

在 Stable Diffusion 中，图像是通过称为采样的过程生成的。

在 ComfyUI 中，此过程发生在 KSampler 节点中。这是实际的“生成”部分，因此您会注意到，当您对提示进行排队时，KSampler 需要花费最多的时间来运行。

在这里插入图片描述
KSampler 接受以下输入：

model：来自 Load Checkpoint 节点的 MODEL 输出 (Unet)
positive：CLIP模型编码的正向提示（CLIP Text Encode节点）
negative：CLIP模型编码的否定提示（其他CLIP Text Encode节点）
latent_image：潜在空间中的图像（Empty Latent Image节点）

由于我们仅根据提示生成图像 (txt2img)，因此我们使用 Empty Latent Image节点向 Latent_image 传递空图像。

（您也可以将实际图像传递给 KSampler，以执行 img2img。我们将在下面讨论这一点）

KSampler 中发生了什么？

Diffusion(扩散)是实际生成图像的过程。

我们从随机信息数组和嵌入（编码的正面和负面提示词）开始。

扩散发生在多个步骤中，每个步骤都对信息数组（也称为潜在变量）进行操作，并产生另一个更类似于提示文本的信息数组。

因此，我们从一个随机信息数组开始，最后得到一个类似于我们已知的信息的数组。

KSampler 输出此信息。然而，它还不在像素空间中（我们看不到它），它仍然是一个潜在的表示。

VAE

VAEDecode 节点有 2 个输入：

我们的检查点模型附带的 VAE（您也可以添加自己的 VAE）
我们的KSampler已经完成去噪的潜在空间图像。

VAE 用于将图像从潜在空间转换到像素空间。

它将最终的像素图像传递到“Save Image”节点，该节点用于向我们显示图像并让我们下载它。

在这里插入图片描述
默认工作流程是您在 ComfyUI 中找到的最简单的工作流程。

本文链接：https://blog.csdn.net/u013716859/article/details/135214946

原作者删帖不实内容删帖广告或垃圾文章投诉

智能推荐

c# 调用c++ lib静态库_c#调用lib-程序员宅基地

文章浏览阅读2w次，点赞7次，收藏51次。四个步骤1.创建C++ Win32项目动态库dll 2.在Win32项目动态库中添加外部依赖项 lib头文件和lib库3.导出C接口4.c#调用c++动态库开始你的表演...①创建一个空白的解决方案，在解决方案中添加 Visual C++ , Win32 项目空白解决方案的创建：添加Visual C++ , Win32 项目这......_c#调用lib

deepin/ubuntu安装苹方字体-程序员宅基地

文章浏览阅读4.6k次。苹方字体是苹果系统上的黑体，挺好看的。注重颜值的网站都会使用，例如知乎：font-family: -apple-system, BlinkMacSystemFont, Helvetica Neue, PingFang SC, Microsoft YaHei, Source Han Sans SC, Noto Sans CJK SC, W..._ubuntu pingfang

html表单常见操作汇总_html表单的处理程序有那些-程序员宅基地

文章浏览阅读159次。表单表单概述表单标签表单域按钮控件demo表单标签表单标签基本语法结构<form action="处理数据程序的url地址“ method=”get|post“ name="表单名称”></form><!--method将表单中的数据传送给服务器处理，get方式直接显示在url地址中，数据可以被缓存，且长度有限制；而post方式数据隐藏传输，_html表单的处理程序有那些

PHP设置谷歌验证器（Google Authenticator）实现操作二步验证_php otp 验证器-程序员宅基地

文章浏览阅读1.2k次。使用说明:开启Google的登陆二步验证（即Google Authenticator服务）后用户登陆时需要输入额外由手机客户端生成的一次性密码。实现Google Authenticator功能需要服务器端和客户端的支持。服务器端负责密钥的生成、验证一次性密码是否正确。客户端记录密钥后生成一次性密码。下载谷歌验证类库文件放到项目合适位置(我这边放在项目Vender下面)https://github.com/PHPGangsta/GoogleAuthenticatorPHP代码示例://引入谷_php otp 验证器

【Python】matplotlib.plot画图横坐标混乱及间隔处理_matplotlib更改横轴间距-程序员宅基地

文章浏览阅读4.3k次，点赞5次，收藏11次。matplotlib.plot画图横坐标混乱及间隔处理_matplotlib更改横轴间距

docker — 容器存储_docker 保存容器-程序员宅基地

文章浏览阅读2.2k次。①Storage driver 处理各镜像层及容器层的处理细节，实现了多层数据的堆叠，为用户提供了多层数据合并后的统一视图②所有 Storage driver 都使用可堆叠图像层和写时复制（CoW）策略③docker info 命令可查看当系统上的 storage driver主要用于测试目的，不建议用于生成环境。_docker 保存容器

随便推点

网络拓扑结构_网络拓扑csdn-程序员宅基地

文章浏览阅读834次，点赞27次，收藏13次。网络拓扑结构是指计算机网络中各组件（如计算机、服务器、打印机、路由器、交换机等设备）及其连接线路在物理布局或逻辑构型上的排列形式。这种布局不仅描述了设备间的实际物理连接方式，也决定了数据在网络中流动的路径和方式。不同的网络拓扑结构影响着网络的性能、可靠性、可扩展性及管理维护的难易程度。_网络拓扑csdn

JS重写Date函数，兼容IOS系统_date.prototype 将所有 ios-程序员宅基地

文章浏览阅读1.8k次，点赞5次，收藏8次。IOS系统Date的坑要创建一个指定时间的new Date对象时，通常的做法是：new Date("2020-09-21 11:11:00")这行代码在 PC 端和安卓端都是正常的，而在 iOS 端则会提示 Invalid Date 无效日期。在IOS年月日中间的横岗许换成斜杠，也就是new Date("2020/09/21 11:11:00")通常为了兼容IOS的这个坑，需要做一些额外的特殊处理，笔者在开发的时候经常会忘了兼容IOS系统。所以就想试着重写Date函数，一劳永逸，避免每次ne_date.prototype 将所有 ios