42| 人脸迁移-PuLID

PuLID介绍：

PuLID能够确保生成的图像中的人物特征与参考图高度一致，如人脸，而不需要复杂的模型微调。

论文地址：

https://arxiv.org/pdf/2404.16022

插件下载：

插件地址：

https://github.com/cubiq/PuLID_ComfyUI

安装依赖：

pip install -r requirements.txt

部分电脑需要安装PyTorch,若使用过程中没报这个错误可忽略。

模型下载：

PuLID模型：

点击PuLID pre-trained model 进行下载

安装目录：ComfyUI/models/pulid/

EVA模型：

EVA02_CLIP_L_336_psz14_s6B.pt

这个模型通常在使用的时候会自动下载，下面是手动下载的方法。

下载地址：

https://huggingface.co/QuanSun/EVA-CLIP/tree/main

来到comfyui根目录下.cache\huggingface\hub文件夹，

新建文件夹：models–QuanSun–EVA-CLIP

其中models代表这个是模型目录，QuanSun–EVA-CLIP是作者的文件目录，注意抒写格式

在目录里面新建refs和snapshots两个文件夹

其中refs里面新建一个main的文件，用记事本打开，随便输入一串字母，这串字幕代表哈希值，

可以调用snapshots中的文件。

在snapshots中新建一个文件夹，这个文件夹的名字就是你之前输入的那串字母，然后将下载的模型放在这个文件夹内。

UNET模型

下载地址：

https://huggingface.co/ByteDance/SDXL-Lightning/tree/main

大模型安装目录：

models\unet

lora模型安装到你的lora模型文件夹

InsightFace模型

需要使用到InsightFace的 AntelopeV2模型

下载地址：https://huggingface.co/MonsterMMORPG/tools/tree/main

安装目录：ComfyUI/models/insightface/models/antelopev2

当然这里也需要你安装InsightFace，安装方法可以看之前InsightFace的下载与安装那节课。

节点说明：

对于脸部风格化生成，我们需要使用到的是【应用PuLID】节点：

输入：

模型：接受UNET模型；

PuLID:接受PuLID模型；

EVA_CLIP:接受EVA模型；

面部分析模型：接受PuLIDInsightFace模型；

图像：接受人像图片。

输出：

模型：输出模型到K采样器。

第二种用法是使用lora，然后加载UNETlora模型

使用方法：

脸部风格化生成

上传一张人物图片，就可以生成这个人像的各种风格的图片，而且相似度非常高。

工作流：

📎PuLID_4-Step_lightning.json

说明：

选择不同的模型和提示词就可以生成不同风格的人物；

可以描述不同的姿势，衣服，发现等等。