简述
IP-Adapter主要功能是通过图像提示来生成图像,能够复制参考的图像的风格、构图或人物、人像特征。
我们之前了解过LoRA技术,它是一种微调大型模型的方法,用来添加特定的艺术风格或细节。传统上,如果我们想要大模型生成某种特定风格的图像,比如梵高的印象派风格,就需要通过训练LoRA权重来实现这一目标。然而,有了IP-Adapter,这一过程变得更为直接和高效。
IP-Adapter是一种先进的技术,它允许我们仅仅上传一张图片作为参考,就能捕捉并应用该图片的风格和特征到生成的图像上。这意味着,无论你想要的是复古风、科幻感还是任何其他风格,只需提供一张具有该风格的示例图片,IP-Adapter就能理解并复制这种风格,无需额外的训练过程。这样一来,创作过程变得更加直观,用户可以轻松地将自己的创意视觉化,同时保持个人风格的一致性。
简单来说,IP-Adapter能够即时理解和应用图片中所体现的风格和特征,从而创造出符合你期待的个性化作品。这种方法不仅节省了时间和资源,还极大地提高了创作的灵活性和效率。
主要功能
1\换脸
通过IPAdapter的FaceID模型,对人物进行换脸。
2\风格化人物
先获取人物头像特征(脸部,头发等),然后生成他不同风格的形象。
3\风格学习
上传一张图片就可以学习这种图片的风格,从而进行图片生成。
其他功能
4\风格融合
风格学习的另一种方式,可以给原图换风格,造型接近。
下载与安装:
插件下载:
https://github.com/cubiq/ComfyUI_IPAdapter_plus?tab=readme-ov-file
模型下载:
IPAdapter的模型有三类:
1、clip模型(属于预处理器模型)
在插件下载地址找到clip的两个模型,如下图,直接点击即可下载,
但是下载后需要修改模型名字,与上图蓝色链接的名字一致
模型安装到/ComfyUI/models/clip_vision目录下。
2、大模型
ip-adapter的大模型,直接点击下载,需要下载到/ComfyUI/models/ipadapter文件夹下
FaceID模型(属于预处理器的模型)
需要下载到/ComfyUI/models/ipadapter文件夹下
3、Lora模型
需要下载到/ComfyUI/models/loras
注意:开头Deprecated的模型是淘汰的模型,可以不下载。
insightface安装
使用IPAdapter需要安装insightface,
insightface的安装详见insightface的下载与安装那节课。
1、本站AI工具使用教程全免费,并且持续更新
2、如果你想看一些例子或者学更多东西,需要花每年128元成为普通会员。
3、对于更专业的商业案例,你需要花599元成为高级会员才能看到。
😊 立刻申请会员😊 →