comfyui各种加载器详解
comfyui的各种加载器作用都是用来加载模型,根据模型类型的不同选择不同的加载器。
Chedpoint加载器(简易)-CheckpointLoaderSimple
作用:用于加载各种基础大模型。这类大模型都是由三部分组成的,UNET模型、clip模型、VAE模型。
节点:
输出
模型:输出UNET模型
CLIP:输出CLIP模型
VAE:输出VAE模型
参数
Checkpoint名称:选择要使用的基础大模型
Checkpoint加载器(pysss)-CheckpointLoader|pysssss
作用:第三方节点,跟上面节点作用是的一样,只是多个了字符串接口,还有就是选择模型时展示方式更加清楚。
节点:
输出
STRING:输出字符串,字符串内容为事先定义好的提示词。
参数:
Checkpoint名称:选择要使用的基础大模型
example:显示事前定义好的该模型说明文件和提示词。
Checkpoint加载器(仅图像)-ImageOnlyCheckpointLoader
作用:与上面两个模型一样,区别时CLIP变成了CLIP视觉,它是专门用来制作视频输入图片使用的。
节点:
CLIP视觉:一般对接“SVD_图像到视频_条件”节点。
VAE加载器-VAELoader
作用:用于加载vae模型。一般对接vae编码、解码节点。
节点:
VAE:输出vae接口
参数
vae名称:选择vae模型,不同的大模型类型可选择的vae模型也不同
LoRA加载器-LoraLoader
作用:用于加载lora模型。非必要节点,作为通道在加载Unet模型和CLIP模型时把Lora模型加入进去产生作用。
输入输出
模型:从加载基础模型的节点上输入输出Unet模型
CLIP:从加载基础模型的节点上输入输出CLIP模型
参数
LoRA名称:选择要使用的loRA模型
模型强度:控制LoRA模型的影响强度
CLIP强度:控制CLIP模型的影响强度,CLIP强度主要用于通过调节文本提示的影响力来控制图像生成的结果。
LoRA加载器(仅模型)
参考Checkpoint加载器(仅模型)
LoRA加载器(pysss)
参考Checkpoint加载器(pysss)节点
ControlNet加载器-ControlNetLoader
作用:用于选择要使用的ControlNet模型
输出
放大模型:输出选择使用的ControlNet模型
参数
ControlNet名称:选择ControlNet模型
DiffControlNet加载器-DiffControlNetLoader
作用:ControlNet加载器的进阶版,多了一个模型输入接口,可以额外指定模型的输入,对第三方开发的模型支持的更好。
输入
model:串联到大模型上
输出
ControlNet:把选择好的模型输入到应用节点上
参数
ControlNet名称:选择模型的地方
CLIP视觉加载器-CLIPVisionLoader
作用:它跟“Checkpoint加载器(仅图像)”里的CLIP视觉作用是一样的,只是单独列出来了。它除了可以用来连接视频接口外,还拥有图片的学习和识别能力。一般对接“clip视觉编码”节点。
unCLIPCheckpoint加载器-unCLIPCheckpointLoader
作用:专门用来加载unclip模型。把他当作普通大模型理解就可以了,它与其他的潜空间扩散大模型是两种不同的模型。
GLIGEN加载器-GLIGENLoader
作用:这个GLIGEN加载器是专门用来加载GLIGEN模型的,它可以指定画面的某个区域生成特定的内容。
超网络加载器-HypernetworkLoader
作用:这个超网络加载器实际就是hypernetwork的加载器,基本已经被lora模型所替代掉了。
接口
输入输出:串联基础大模型节点
参数
超网络名称:要使用的hypernetwork
强度:hypernetwork作用的强度,范围0~1
放大模型加载器-UpscaleModelLoader
作用:用于选择要使用的放大模型
接口
输出
放大模型:输出要使用的放大模型
参数
放大模型名称:选择放大模型
风格模型加载器-StyleModelLoader
作用:目前这个风格模型加载器仅只有腾讯一家做了这个T2iadapter风格模型,它的作用就是进行画面风格迁移。一般后接“风格模型应用”节点。
输出
风格模型:在此节点处加载模型,传递到下一节点进行应用。
风格模型名称:选择要使用的风格模型