Skip to main content
CLIPMergeSimple 是一个模型合并节点,可根据指定比例合并两个 CLIP 文本编码器模型。它会克隆第一个 CLIP 模型,并应用来自第二个 CLIP 模型的加权补丁(跳过 position IDs 和 logit scale 组件),从而生成融合了两种来源特征的混合模型。

输入

输出

合并机制说明

合并算法

该节点使用加权平均来合并两个模型:
  1. 克隆基础模型:首先克隆 clip1 作为基础模型
  2. 获取补丁:获取 clip2 的所有关键补丁
  3. 过滤特殊键:跳过以 .position_ids.logit_scale 结尾的键
  4. 应用加权合并:使用公式 (1.0 - ratio) * clip1 + ratio * clip2

ratio 参数说明

  • ratio = 0.0:完全使用 clip1,忽略 clip2
  • ratio = 0.5:两个模型各贡献 50%
  • ratio = 1.0:完全使用 clip2,忽略 clip1

使用场景

  1. 模型风格融合:组合在不同数据上训练的 CLIP 模型的特征
  2. 性能优化:平衡不同模型的优缺点
  3. 实验研究:探索不同 CLIP 编码器的组合
本文档由 AI 生成。如果您发现任何错误或有改进建议,欢迎贡献! 在 GitHub 上编辑

Source fingerprint (SHA-256): 42c4b2042c56c3f21a9416aa577e2d41fef1dcc749c4e5c7953851110a4fb6bc