【更新20240726】ComfyUI IPAdapter plus，ComfyUI使用IPAdapter插件

IPAdapter 是非常强大的图像到图像调节模型。由cubiq大神制作的ComfyUI_IPAdapter_plus插件可以为ComfyUI增加图合图非常好玩的功能参。考图像的主题，甚至只是样式，都可以很容易地转移到一代人身上。将其视为一张图像 lora。

示例工作流

examples 目录中有许多工作流，涵盖了所有 IPAdapter 功能。

下载或 git 克隆此存储库到目录中或使用管理器。IPAdapter 始终需要最新版本的 ComfyUI。如果某些内容不起作用，请务必升级。请注意，管理器的自动更新有时不起作用，您可能需要手动升级。ComfyUI/custom_nodes/

现在有一个统一模型加载器，要使其正常工作，您需要完全按照下面所述的方式命名文件。旧版加载器可以使用任何文件名，但您必须手动选择它们。可以将模型放入子目录中。

请记住，您还可以使用任何自定义位置设置文件中的条目。ipadapter extra_model_paths.yaml

• /ComfyUI/models/clip_vision
  • CLIP-ViT-H-14-laion2B-s32B-b79K.safetensors，下载并重命名
  • CLIP-ViT-bigG-14-laion2B-39B-b160k.safetensors，下载并重命名
  • clip-vit-large-patch14-336.bin，仅针对 Kolors 模型下载和重命名
• /ComfyUI/models/ipadapter，如果不存在，请创建它
  • ip-adapter_sd15.safetensors，基本模型，平均强度
  • ip-adapter_sd15_light_v11.bin、轻冲击模型
  • ip-adapter-plus_sd15.safetensors，加号模型，非常强大
  • ip-adapter-plus-face_sd15.safetensors， 人脸模型， 人像
  • ip-adapter-full-face_sd15.safetensors，更强的人脸模型，不一定更好
  • ip-adapter_sd15_vit-G.safetensors，基本型号，需要 bigG clip 视觉编码器
  • ip-adapter_sdxl_vit-h.safetensors， SDXL模型
  • ip-adapter-plus_sdxl_vit-h.safetensors，SDXL plus 模型
  • ip-adapter-plus-face_sdxl_vit-h.safetensors，SDXL人脸模型
  • ip-adapter_sdxl.safetensors，vit-G SDXL 型号，需要 bigG clip 视觉编码器
  • 已弃用的 ip-adapter_sd15_light.safetensors，v1.0 轻影响模型

FaceID 型号需要，您需要在 ComfyUI 环境中安装它。请查看此问题以获取帮助。请记住，大多数 FaceID 型号还需要 LoRA。insightface

要使 Unified Loader 正常工作，需要完全按照下面的列表命名文件。

• /ComfyUI/models/ipadapter
  • ip-adapter-faceid_sd15.bin、基础 FaceID 模型
  • ip-adapter-faceid-plusv2_sd15.bin、FaceID 加 v2
  • ip-adapter-faceid-portrait-v11_sd15.bin、文字提示样式转移对人像进行翻译
  • ip-adapter-faceid_sdxl.bin、SDXL 基础 FaceID
  • ip-adapter-faceid-plusv2_sdxl.bin、SDXL plus v2
  • ip-adapter-faceid-portrait_sdxl.bin、SDXL文本提示样式转移
  • ip-adapter-faceid-portrait_sdxl_unnorm.bin，非常强的风格传输仅 SDXL
  • 已弃用的 ip-adapter-faceid-plus_sd15.bin，FaceID 和 v1
  • 已弃用的 ip-adapter-faceid-portrait_sd15.bin， v1 的纵向模型

大多数 FaceID 型号都需要 LoRA。如果您使用 如果您遵循命名约定，它将自动加载。否则，您必须手动加载它们，请注意每个 FaceID 模型都必须与其自己的特定 LoRA 配对。IPAdapter Unified Loader FaceID

• /ComfyUI/models/loras
  • ip-adapter-faceid_sd15_lora.safetensors
  • ip-adapter-faceid-plusv2_sd15_lora.safetensors
  • ip-adapter-faceid_sdxl_lora.safetensors， SDXL FaceID LoRA
  • ip-adapter-faceid-plusv2_sdxl_lora.safetensors，SDXL 加上 v2 LoRA
  • 已弃用的 ip-adapter-faceid-plus_sd15_lora.safetensors，已弃用的 FaceID plus v1 模型的 LoRA

所有型号都可以在Qpipi上找到。

社区模型

社区已经融合了一些有趣的 IPAdapter 模型。

• /ComfyUI/models/ipadapter
  • ip_plus_composition_sd15.SafeTensors，一般的组成忽略了风格和内容
  • ip_plus_composition_sdxl.safetensors，SDXL版本
  • Kolors-IP-Adapter-Plus.bin、IPAdapter Plus for Kolors模型

如果您知道其他型号，请告诉我，我会将它们添加到统一加载器中。

一般性建议

压缩包examples示例目录中包含许多工作流。在寻求支持之前，请检查它们。

通常，最好至少降低到并增加数字步长。为了增加对提示的依附性，您可以尝试更改节点中的权重类型。weight0.8 IPAdapter Advanced

节点参考

我正在（慢慢地）记录所有节点。请查看 Nodes 参考。

故障 排除

在发布新问题之前，请检查故障排除。还要记住检查以前关闭的问题。

💡如有问题或建议，🥳请在社区或评论告诉我们。🎨享受精彩的AI绘画乐趣！| 使用Qpipi读图提示功能，获取图片TAG Prompt提示 | Stable Diffusion AI绘图软件常见问题解答 | AI绘画新人必备工具指南

⭕ 注意：请勿使用浏览器的"阅读模式"，会导致无法显示下载等内容。