PuLID: 单张图像克隆你的数字分身pulid懒人包

最新推荐文章于 2025-04-25 15:33:39 发布
最新推荐文章于 2025-04-25 15:33:39 发布
阅读量552 收藏 9
点赞数 3
文章标签： ai PuLID python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_29556507/article/details/139098315
版权

PuLID是一种免调整的 ID 定制方法。 PuLID 保持高 ID 保真度，同时有效减少对原始模型行为的干扰。

温馨提示:

  • 我们在底部提供了一些示例，您可以先尝试这些示例提示
  • 通常一张 ID 图像就足够了，您还可以补充其他辅助图像。
  • 我们提供两种模式：保真模式和极端风格模式。在大多数情况下，默认的保真度模式就足够了。如果您发现生成的结果不够风格化，可以选择极度风格模式。

字节跳动近年来风头正劲，隐隐有成为互联网公司的扛把子。AI时代来了，字节跳动仍然是非常刚猛，开源闭源齐下阵，前不久闭源大模型豆包降价99%，把大模型价格疯狂打了下来。近期，字节还在AI绘画领域推出了全新单图克隆数字分身的PuLID，快随我去看看吧~

PuLID简介

在AI绘画中，将文字描述转换成图像是常见的需求，比如在设计个性化头像或游戏角色时。然而，传统的方法需要对每个不同的身份进行繁琐的调整，既费时又昂贵。PuLID技术是由字节跳动团队开源的一项创新技术，无需训练模型即可轻松实现图像换脸效果。

免费离线懒人包

为了方便大家的使用，我又出手了，为大家制作了一款离线整合包。这个懒人包非常方便，下载到本地解压后双击“run_dianwo_qi_dong_javawjs.exe”，系统就会自动运行。

使用步骤如下：

1. 上传目标图片：只需提供一张参考人像，通常一张图像就足够，也可以补充其他多张辅助图像进行混合生成。

2. 输入提示词：根据自己的需要随意编写具体的提示词。

4. 点击提交

目前提供两种模式：保真模式和极端风格模式。在大多数情况下，默认的保真度模式就足够了。如果你发现生成的结果不够风格化，你可以选择极度风格模式。下面是我亲测，使用同一张图像作为参考，生成的不同风格人像。

PuLID技术是一个创新的步骤，它使得个性化图像生成变得更加快速、经济和高效。感兴趣的朋友，千万不要错过！

注意事项：

①该项目建议使用英伟达显卡运行，建议8G显存以上

②请确保安装路径不包含中文，不然可能会引起奇怪的适配问题

小莫理
关注
Pulid:pure and lightning id customization via contrastive alignment
liguandong
11-22 223
2.缺乏保真度，gan时代的经验，提高id保真度的一个直接想法是在扩散训练中引入id loss，扩散模型需要迭代去噪，准确获取X0需要多个多个步骤，直接从当前时间步预测X0，然后计算id损失，然而当当前时间步较大时，预测的X0往往是有嘈杂和有缺陷的，这种情况下计算id损失显然是不准确的，因为人脸识别backbone是在真实图像上训练的。可以解决上述两个挑战，1.为了最小化对原始模型行为的影响，构建了一个contrastive pair包括了相同的提示和初始化潜变量，分别进行id插入和不进行id插入。
【深度学习】PuLID: Pure and Lightning ID Customization via Contrastive Alignment
q742971636的博客
06-06 1334
我们提出了一种新颖的、无需调整的文本生成图像ID定制方法——Pure and Lightning ID customization（PuLID）。通过将Lightning T2I分支与标准扩散分支结合，PuLID引入了对比对齐损失和准确ID损失，最大程度地减少了对原始模型的干扰，确保了高ID保真度。实验表明，PuLID在ID保真度和可编辑性方面都表现出色。PuLID的另一个吸引人的特性是，在插入ID前后，图像的元素（例如背景、光照、构图和风格）尽可能保持一致。
PuLID: 图像背景、光线、风格等均保持高度一致图像生成工具，附本地一键包
AI人工智能影像技术博客
05-13 890
这一技术通过对比对齐的方式，实现了Pure和Lightning ID的自定义，既保持了高度的ID保真度，又有效减少了对原始模型行为的干扰。PuLID的发布将是该领域的重要进步，为用户提供了更多选择和灵活性，推动技术的创新和发展。如果你想脑洞大开，让张三和李四两个人合体，或者用爸爸和妈妈的照片，给自己生一个“弟弟”或“妹妹”，也可以上传父母的照片，勾选ID混合这个选项，如下图。接下来就是提示词，可以先用默认的提示词和反向提示词，如果精通SD等AI绘画软件，可以自行发挥创造，自己写提示词，开阔新的玩法。
SD必备知识：PuLID面部特征一致性风格保持与迁移，轻松搞定私人写真摄影
最新发布
2401_84830464的博客
04-25 905
PuLID是最新字节开源的，因此本文主要介绍PuLID在SD-WebUI中安装指南。关于IP-Adapter以及InstantId请参考社区介绍。PuLID是一种类似于ip-adapter的方法，用于保持面部身份特征和风格迁移模型。PuLID同时使用了嵌入和CLIP嵌入，这与模型的做法类似。不过，在将图像传递给CLIP之前，PuLID会使用facexlib进行额外的步骤，即将面部从背景环境中遮罩出来。PuLID还使用了EvaCLIP代替了普通的CLIP。在方面，PuLID也做了一些比IPAdapter。
探索未来图像定制的神器——PuLID
gitblog_00027的博客
06-11 481
探索未来图像定制的神器——PuLID 去发现同类优质开源项目:https://gitcode.com/ 在这个数字化时代，我们对于个性化和创新的需求日益增长，尤其是在图像生成领域。 PuLID（Pure and Lightning ID Customization via Contrastive Alignment）是一个崭新的开源项目，它为用户提供了一种纯粹且快速的方式来定制独一无二的图像。这个...
基于Pulid-Flux一致性换脸工作流
10-04
在当前的多媒体处理领域中，"基于Pulid-Flux一致性换脸工作流"已经成为一个技术热点。它涉及到的领域包括图像处理、深度学习、计算机视觉等，实现的核心目标是将一个人的脸部特征在不影响整体视频质量的前提下，准确...
comfyui中Pulid安装后运行报错：PulidFluxModelLoader ‘PulidFluxModel‘ object has no attribute ‘image_proj‘...
**My Coding Family**
04-23 833
🏆本文收录于《全栈Bug调优(实战版)》专栏，主要记录项目实战过程中所遇到的Bug或因后果及提供真实有效的解决方案，希望能够助你一臂之力，帮你早日登顶实现财富自由🚀；同时，欢迎大家关注&&收藏&&订阅！持续更新中，up！up！up！！ 备注：部分问题/疑难杂症搜集于互联网。
ComfyUI-PuLID-Flux-Enhanced中的train_weights优化
liguandong
12-03 259
假设有一个real id embeddding，理想的表达了id特征，使用该embedding，可以获得最佳的id保真度。虽然我们使用选定的样本作为目标，但训练后的权重不会完美的指向目标，如果是这样，只需要使用选定的权重，无需训练。注意观察到pulid多了训练模块，但是pulid本身也没有什么问题，主要的问题还是在和lora结合时产生的一些变化，他会改变lora的一些风格特征。train_weights，可以用小于2000步进行训练，从而实现比非训练更深的融合，过多的训练步骤会导致训练崩溃。
PuLID——自由风格换脸转绘
嘟嘟的博客
05-19 1484
PuLID——人物一致性风格转绘webui离线整合包
当前最好的Stable Diffusion角色特征固定工具来了！字节提出PuLID，用于文本生成图像领域，实现了高度的ID保真度与可编辑性。
AIGC Studio：分享AIGC前沿知识和好玩应用，公众号同名。
05-16 655
我们提出了一种新的无需调优的文本到图像生成ID自定义方法PuLID (Pure and Lightning ID customization)。通过将一个标准扩散分支与一个LightningT2I分支结合起来，PuLID引入了对比对准损耗和精确ID损耗，最大限度地减少了对原始模型的干扰，并确保了高ID保真度。实验表明，PuLID在ID保真度和可编辑性方面都取得了较好的性能。PuLID的另一个吸引人的特性是，插入ID前后的图像元素(例如背景、光照、构图和样式)尽可能保持一致。
新ID保持项目PuLID震撼来袭，让你的图像创作更上一层楼！
08-28 458
PuLID是一款图像处理工具，能够保持图像背景、光线和风格的一致性，并支持多种创意操作。用户可通过提供的链接在线体验并下载相关模型，注意安装过程中的显存要求。
2023年最新Stable Diffusion下载+安装+使用教程（超详细版本），收藏这一篇就够了！
weixin_58753619的博客
12-19 2504
本文讲解的是用“整合包”来**本地部署**安装及使用Stable Diffusion WebUI，你不需要懂太多的计算机知识，而且用整合包对新手也是比较友好的，磁盘需要预留100G~200G空间才能玩。
[ComfyUI]Flux：写真新篇章！字节PuLID率先开启一致性风格迁移，无损画手和优质画面保持
阿道夫的博客
09-13 1399
在Flux出来后短时间内，社区生态反响和发展足够的迅猛快速。至今为止，社区LORA模型的涌现，Flux底膜数据集缺少问题（特别中文元素）逐步解决。ControlNet可控性方面已有Xlabs和InstantX的几款ControlNet（目前已可用，但画质还有待进一步提升）也在加速训练和完善中。近日字节Pulid团队，在之前SDXL的Pulid模型发布，为FLUX.1-dev提供了一个无需调整的身份ID一致性和定制化解决方案，风格一致性保持一直是在人物写真、连续多图漫画展示和视频等领域作为核心问题之一。
Stable diffusion 4.8.7 升级版来了！（Ai绘画无需部署，解压即用）附安装包
m0_71744960的博客
05-13 939
Stable Diffusion无疑是最近最火的AI绘画工具之一，本期设计软件库给大家带来了2024最新升级的Stable Diffusion资料包合集！比之前推送的更加智能、快速和简单2024全新Stable Diffusion 4.8.7资料包新版本使用更方便附带SD电商实战教程等资源让你快速上手如果你是零基础小白，想快速入门AI绘画是可以考虑的。一方面是学习时间相对较短，学习内容更全面更集中。二方面是可以找到适合自己的学习方案。
基于Pulid-Flux一致性换脸
小龙在线
10-04 2338
Pulid-Flux是风格一致性保持和迁移组件，是字节Pulid团队继SDXL的Pulid版本沉淀基础上再次出发布的PuLID-FLUX-v0.9.0 Flux版本风格一致性组件。能够提供了一个无需调整的身份ID一致性和定制化解决方案，能够被应用于风格一致性保持领域包括：人物写真、连续多图漫画展示和视频等领域作为核心问题之一。支持GGUF版本运行。
用自然语言即可完全控制用户界面；无需调整的文本至图片生成的ID定制方法；OpenAI构建应用指南
haleycat的博客
05-04 1354
PyWinAssistant内置了增强计算机人类使用效率的辅助选项，并采用新技术途径对用户界面和用户体验提供辅助和测试，通过空间思维的可视化正确概括任何自然语言提示，并计划执行操作系统中的正确操作，同时考虑到安全因素。利用一种叫做Lightning T2I（Text to Image）的技术分支以及标准的扩散模型，PuLID通过对比对齐损失和精确ID损失的结合，最小化对原始模型的干扰，同时确保高度的ID保真度。PuLID是一种新颖的无需调整的文本至图片生成的定制方法，通过对比对齐实现高ID保真度。
PuLID安装
03-19
<think>好的，我现在需要帮用户解决如何安装PuLID的问题。首先，用户提到了几个引用来源，我需要仔细看看这些引用里有没有相关的安装步骤。引用1提到PuLID是字节开源的，但主要介绍在SD-WebUI中的安装，可能需要参考其他社区内容。引用2是ComfyUI-PuLID-ZHOU的非官方实现，项目地址是gitcode上的链接，可能提供另一种安装方式。引用3和4给出了具体的命令和步骤，特别是引用3详细列出了克隆仓库、conda环境设置、安装依赖、模型下载和服务启动的步骤，看起来最详细。 用户的需求是查找安装PuLID的方法或教程，所以应该优先整理引用3和4的信息。引用3中的命令包括克隆仓库、创建conda环境、安装依赖、授权模型下载和启动服务，这些都是安装的关键步骤。引用4提到PuLID-FLUX-v0.9.0模型，可能需要注意是否需要额外步骤来适配FLUX版本。 另外，用户可能在使用不同的平台，比如SD-WebUI或者ComfyUI，需要分别说明。引用1和引用2涉及不同的UI，可能需要分情况讨论。但用户的问题比较笼统，可能希望得到全面的安装指南，所以应该涵盖两种主要的安装方式：原版PuLID和ComfyUI的版本。 需要注意的是，引用3中的命令有些是shell命令，用户可能需要知道如何运行这些命令，比如在终端中操作。同时，huggingface-cli login需要用户有账号和访问权限，可能需要提醒用户登录和授权。 最后，用户可能遇到的问题比如环境配置错误、依赖冲突或者模型下载失败，应该在注意事项里提到。例如，Python版本、依赖包版本冲突、网络问题等。引用4提到的FLUX模型可能需要不同的处理，但根据引用3的步骤，可能已经包含在安装流程中，或者需要额外说明。 总结下来，回答应该分为几个部分：原版PuLID安装步骤（包括环境设置、依赖安装、模型下载、启动服务）、ComfyUI的安装方法，以及注意事项。这样结构清晰，用户可以根据自己的需求选择对应的安装方式。同时，生成相关问题时要围绕安装可能遇到的后续问题，比如环境配置、模型使用、不同框架的集成等。</think>### PuLID安装方法详解 根据引用资料，PuLID的安装主要分为两种场景：原版PuLID框架部署和ComfyUI插件版本安装。以下是具体步骤： #### 一、原版PuLID安装步骤（引用3） 1. **克隆仓库** ```bash git clone https://github.com/ToTheBeginning/PuLID.git cd PuLID ``` 2. **创建conda环境** ```bash conda create --name pulid python=3.10 conda activate pulid ``` 3. **安装依赖包** ```bash pip install -r requirements.txt ``` 4. **授权模型下载** ```bash pip install -U huggingface_hub huggingface-cli login # 需输入HuggingFace账号token ``` 5. **启动服务** ```bash python app_flux.py ``` #### 二、ComfyUI插件安装（引用2） 1. **进入插件目录** ```bash cd ComfyUI/custom_nodes/ ``` 2. **克隆插件仓库** ```bash git clone https://gitcode.com/gh_mirrors/co/ComfyUI-PuLID-ZHO ``` 3. **安装依赖** ```bash pip install -r requirements.txt ``` #### 三、注意事项 - FLUX版本模型需注意框架兼容性（引用4） - 建议使用NVIDIA显卡并安装CUDA驱动 - 模型文件默认下载路径为`~/.cache/huggingface`
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值