IPAdapter风格合成SDXL(IPAdapterStyleComposition)

admin2024-09-14313

image.png

该节点作用在于迁移时可以分别定义风格迁移和构图迁移。

节点

所属插件:ComfyUI_IPAdapter_plus

下载地址:https://github.com/cubiq/ComfyUI_IPAdapter_plus

节点路径:新建节点->应用IPAdapter->风格合成->IPAdapter风格合成SDXL

参数

接口

模型:串联基础模型

IPAdapter:使用多个此节点时,进行串联。

风格图像:风格参考图

合成图像:构图参考图

负面图像:不希望出现图片的特征,可以简单理解为Comfy不能直接识别图片,只能把图片特征对应成各种tag集合,负面图片对应的tag特征将不允许出现在生图中

关注层遮罩:可选,只有遮罩位置被参考图影响

CLIP视觉:没有发现使用场景

选项

  • 权重:权重越高参考图影响越高提示词影响越低,权重越低提示词影响越高参考图影响越低

  • 权重类型:IPAdapter 应用于 UNet 块的方式。

    • 基础节点和高级节点权重的对比情况如下:

    • standard == linear,

    • prompt is more important == ease out

    • style transfer:专注于迁移风格

    • composition:只迁移构图

    • strong style transfer:强风格迁移

  • 风格扩展

  • 合并嵌入组:当参考图为多张时,多图融合的方式

    • 联结:将每个图像的嵌入链接起来,有效保留所有图片的输入信息并组合起来,合并每个图片的广泛特征

    • 相加:对图像的嵌入求和,增强图像之间的共同特征

    • 相减:如果多张图中有共同部分,把共同部分去掉

    • 平均:对各个图像的嵌入特征取平均值

    • 规格化平均:根据图像在批次中的相对权重进行微调,效果不好

  • 开始应用位置:IPAdapter参与影响生图的开始时间

  • 结束应用位置:IPAdapter参与影响生图的结束时间

  • 权重类型:三种权重类型选择。

    • standard:标准类型,参考图影响起决定作用

    • prompt is more important:风格的提示词影响超过参考图影响,构图仍由参考图影响

    • style transfer:风格迁移,风格完全由参考图影响,构图不参与影响

  • 嵌入组缩放:


网友评论