IPAdapter风格合成SDXL(IPAdapterStyleComposition)
该节点作用在于迁移时可以分别定义风格迁移和构图迁移。
节点
所属插件:ComfyUI_IPAdapter_plus
下载地址:https://github.com/cubiq/ComfyUI_IPAdapter_plus
节点路径:新建节点->应用IPAdapter->风格合成->IPAdapter风格合成SDXL
参数
接口
模型:串联基础模型
IPAdapter:使用多个此节点时,进行串联。
风格图像:风格参考图
合成图像:构图参考图
负面图像:不希望出现图片的特征,可以简单理解为Comfy不能直接识别图片,只能把图片特征对应成各种tag集合,负面图片对应的tag特征将不允许出现在生图中
关注层遮罩:可选,只有遮罩位置被参考图影响
CLIP视觉:没有发现使用场景
选项
权重:权重越高参考图影响越高提示词影响越低,权重越低提示词影响越高参考图影响越低
权重类型:IPAdapter 应用于 UNet 块的方式。
基础节点和高级节点权重的对比情况如下:
standard == linear,
prompt is more important == ease out
style transfer:专注于迁移风格
composition:只迁移构图
strong style transfer:强风格迁移
风格扩展
合并嵌入组:当参考图为多张时,多图融合的方式
联结:将每个图像的嵌入链接起来,有效保留所有图片的输入信息并组合起来,合并每个图片的广泛特征
相加:对图像的嵌入求和,增强图像之间的共同特征
相减:如果多张图中有共同部分,把共同部分去掉
平均:对各个图像的嵌入特征取平均值
规格化平均:根据图像在批次中的相对权重进行微调,效果不好
开始应用位置:IPAdapter参与影响生图的开始时间
结束应用位置:IPAdapter参与影响生图的结束时间
权重类型:三种权重类型选择。
standard:标准类型,参考图影响起决定作用
prompt is more important:风格的提示词影响超过参考图影响,构图仍由参考图影响
style transfer:风格迁移,风格完全由参考图影响,构图不参与影响
嵌入组缩放: