comfyui各种加载器详解

admin2024-09-022607

comfyui的各种加载器作用都是用来加载模型,根据模型类型的不同选择不同的加载器。

image.png

Chedpoint加载器(简易)-CheckpointLoaderSimple

image.png

作用:用于加载各种基础大模型。这类大模型都是由三部分组成的,UNET模型、clip模型、VAE模型。

节点:

输出

模型:输出UNET模型

CLIP:输出CLIP模型

VAE:输出VAE模型

参数

Checkpoint名称:选择要使用的基础大模型


Checkpoint加载器(pysss)-CheckpointLoader|pysssss

image.png

作用:第三方节点,跟上面节点作用是的一样,只是多个了字符串接口,还有就是选择模型时展示方式更加清楚。

节点:

输出

STRING:输出字符串,字符串内容为事先定义好的提示词。

参数:

Checkpoint名称:选择要使用的基础大模型

example:显示事前定义好的该模型说明文件和提示词。


Checkpoint加载器(仅图像)-ImageOnlyCheckpointLoader

image.png

作用:与上面两个模型一样,区别时CLIP变成了CLIP视觉,它是专门用来制作视频输入图片使用的。

节点:

CLIP视觉:一般对接“SVD_图像到视频_条件”节点。

image.png


VAE加载器-VAELoader

image.png

作用:用于加载vae模型。一般对接vae编码、解码节点。

节点:

VAE:输出vae接口

参数

vae名称:选择vae模型,不同的大模型类型可选择的vae模型也不同


LoRA加载器-LoraLoader

image.png

作用:用于加载lora模型。非必要节点,作为通道在加载Unet模型和CLIP模型时把Lora模型加入进去产生作用。

输入输出

模型:从加载基础模型的节点上输入输出Unet模型

CLIP:从加载基础模型的节点上输入输出CLIP模型

参数

LoRA名称:选择要使用的loRA模型

模型强度:控制LoRA模型的影响强度

CLIP强度:控制CLIP模型的影响强度,CLIP强度主要用于通过调节文本提示的影响力来控制图像生成的结果。


LoRA加载器(仅模型)

参考Checkpoint加载器(仅模型)


LoRA加载器(pysss)

参考Checkpoint加载器(pysss)节点


ControlNet加载器-ControlNetLoader

image.png

作用:用于选择要使用的ControlNet模型

输出

放大模型:输出选择使用的ControlNet模型

参数

ControlNet名称:选择ControlNet模型


DiffControlNet加载器-DiffControlNetLoader

image.png

作用:ControlNet加载器的进阶版,多了一个模型输入接口,可以额外指定模型的输入,对第三方开发的模型支持的更好。

输入

model:串联到大模型上

输出

ControlNet:把选择好的模型输入到应用节点上

参数

ControlNet名称:选择模型的地方


CLIP视觉加载器-CLIPVisionLoader

image.png
作用:它跟“Checkpoint加载器(仅图像)”里的CLIP视觉作用是一样的,只是单独列出来了。它除了可以用来连接视频接口外,还拥有图片的学习和识别能力。一般对接“clip视觉编码”节点。

image.png


unCLIPCheckpoint加载器-unCLIPCheckpointLoader

image.png

作用:专门用来加载unclip模型。把他当作普通大模型理解就可以了,它与其他的潜空间扩散大模型是两种不同的模型。


GLIGEN加载器-GLIGENLoader

image.png

作用:这个GLIGEN加载器是专门用来加载GLIGEN模型的,它可以指定画面的某个区域生成特定的内容。


超网络加载器-HypernetworkLoader

image.png

作用:这个超网络加载器实际就是hypernetwork的加载器,基本已经被lora模型所替代掉了。

接口

输入输出:串联基础大模型节点

参数

超网络名称:要使用的hypernetwork

强度:hypernetwork作用的强度,范围0~1


放大模型加载器-UpscaleModelLoader

image.png

作用:用于选择要使用的放大模型

接口

输出

放大模型:输出要使用的放大模型

参数

放大模型名称:选择放大模型


风格模型加载器-StyleModelLoader

image.png

作用:目前这个风格模型加载器仅只有腾讯一家做了这个T2iadapter风格模型,它的作用就是进行画面风格迁移。一般后接“风格模型应用”节点。

输出

风格模型:在此节点处加载模型,传递到下一节点进行应用。

风格模型名称:选择要使用的风格模型


LLLite加载器

网友评论