AI绘画stable diffusion 一张图10秒多风格私人写真，魔搭开源创新身份保持生成框架FaceChain

最新推荐文章于 2024-09-03 10:48:45 发布
最新推荐文章于 2024-09-03 10:48:45 发布
阅读量1.2k 收藏 41
点赞数 52
文章标签： AI作画 stable diffusion 人工智能 midjourney aigc 人工智能作画 ai
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/text2201/article/details/140534430
版权

大家好我是小王同学！！！

ModelScope更新了开源项目Facechain，最新版本Facecchain-Fact（Face Adapter with deCoupled Training）的新型身份保持框架，该框架 **只需1张照片和10秒内，就可以生成多种人物风格私人写真

FaceChain-FACT是一个创新的框架，用于生成能够保持个人身份特征的人像，支持多种风格，并且与ControlNet和LoRAs模型无缝兼容。用户可以通过熟悉的WebUI界面轻松操作，生成个性化的写真人像。此外，FaceChain-FACT还具有文本到图像和基于Inpainting的流程，提供了高控制性和真实性。根据Github开源主页内容，能看到ModelScope团队有未来计划包括：开发全身人像生成、加速生成过程、支持更多风格，并提供更多有趣的应用。

FaceChain-FACT架构

对于以人为中心的个性化图像生成，基于适配器的方法通过在面部数据上进行文本到图像的训练来学习编码和对齐输入面部，实现了在推理过程中无需额外微调的身份保持个性化。尽管在效率和与输入面部的相似性方面有所提高，但与没有适配器的基础模型相比，生成面部的文本后续能力以及可控性和多样性通常会显著下降。

在FaceChain-FACT中：

  • • 研发团队采用执行基于身份引导的面部去噪，而不是面向面部的图像去噪，以进行解耦训练。

  • • 同时在自注意力块和交叉注意力块之间插入顺序面部适配器，在文本引导之前对潜在面部进行适应，通过面部适应增量正则化（FAIR）对潜在变量进行约束，从而避免面部条件与文本信息的干扰。

  • • 对于要进行去噪的图像，身份条件来自于通过面部洗牌得到的相同身份的面部图像，并通过基于Transformer的特征提取器提取。

FaceChain-FACT体验

ModelScope在魔搭平台提供了在线体验Demo

同时也开源了代码可以自由部署体验：
在这里插入图片描述

体验输入图像

01. 旗袍风

输入模板

输出效果

02. 藏族服饰风格

输入模板

输出效果

03.婚纱风格

输入模板

输出效果

04. T恤风格

输入模板

输出效果

05. 工作服

输入模板

输出效果

06. 汉服风

输入模板

输出效果

07. 校园风

输入模板

输出效果

08. 苗族风格

输入模板

输出效果

09. 多人模板写真-替换女主

输入模板

输出效果

10. 多人模板写真-替换女主

输入模板

输出效果

资料软件免费放送

次日同一发放请耐心等待

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错，但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料，给那些想学习 AI绘画 的小伙伴们一点帮助！

感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。

需要的可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

在这里插入图片描述

**一、AIGC所有方向的学习路线**

AIGC所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了，安装就可直接上手！
在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。
在这里插入图片描述
在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。
在这里插入图片描述
这份完整版的学习资料已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

在这里插入图片描述

AIGC小王
关注
stable diffusion 基础教程-提示词之艺术风格用法
mindcarver
01-03 774
非艺术专业必备的一些艺术方向的promot提示词
AI绘画 | stable diffusion简介和原理
洛阳泰山的博客
10-26 4190
随着深度学习技术的不断发展，文本到图像生成已经成为了研究的热点领域。过去几年中，出现了许多文本到图像的生成模型，如GANs、VQ-VAE等。这些模型在生成图像时，通常需要使用大量的数据和计算资源，并且生成的图像质量也参差不齐。因此，开发一种更加稳定、高效且能够生成高质量图像的文本到图像生成模型成为了当务之急。在这个背景下，Stable Diffusion应运而生。该模型由CompVis、Stability AI和LAION的研究人员和工程师共同开发，于2022年发布。
Stable Diffusion 4.8.7升级版更新，Ai绘画风口已来！（无需部署，解压即用）
weixin_55154866的博客
05-30 569
2024可以称得上是Ai技术大爆发的元年，目前两款Ai神器大火，一款是大名鼎鼎的Chat GPT。 另外一款大火的是本期社长介绍的Ai绘图软件—Stable Diffusion。
AI绘图的场景应用：文生图、图生图
qq_41314882的博客
03-15 2204
AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。
Flux【基础篇】：Flux&Midjourney&SDXL模型出图对比：人体结构&动作姿势
2401_85725028的博客
08-26 1093
（1）总体来说，Flux和Midjourney在人物肢体动作姿势方面还是有很大的改进空间，一方面对于比较难的瑜伽姿势，很容易出现肢体错位的情况，另一方面，对于瑜伽姿势感觉理解的都不太正确，出图效果人物姿势都还比较随意。提示词：一个宁静的中国美女，带着温柔的微笑，她的脸在柔和的晨光中清晰可见，坐在莲座上，周围是一片宁静的竹林。当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。
【ComfyUI】Flux 提示词太难了？Flux Prompt 轻松提示增强！更详细、更具描述性！
最新发布
2401_84760719的博客
09-03 1543
Flux真的太火了，小编日常也主要以Flux出图为主了。但每每写提示词时有没有人和老徐有类似的情况，就是经常为写提示词而穷思苦想呢？怎么转换成我们最适合的自然语言风格的时候就不太会描述了呢~那么大家就一起来看看今天老徐给的这款工作流节点——是否可以派上用场。
AI绘画Stable Diffusion、Midjourney、DALL2等AI绘画基础知识
07-22
### AI绘画Stable Diffusion、Midjourney、DALL2等AI绘画基础知识 #### 概述 随着深度学习技术的迅速发展，人工智能绘画已经成为一种新兴的技术趋势，它为创意工作者和爱好者提供了强大的工具来实现自己的想象。...
ai绘画Stable Diffusion安装包与教程WebUI版本文字生成图片
11-05
AI绘画，文本生成图片，WebUI 输入英文描述然后点击生成就可以了，根据描述语生成精美图画 注意 1、英伟达显卡显卡最低4G，最好是6G以上，显卡内存越高越好，效果更佳 2、安装时部分依赖需要外网
揭秘 Stable Diffusion：利用 AI 智能绘图功能，打造出具有创意性的平面设计作品——AI 作图神器 Stable Diffusion 有哪些强大功能？应用案例详解
热门推荐
AI天才研究院
06-12 3万+
在当今数字化时代，人工智能技术已经深入到我们的生活中的各个领域。其中，AI 智能绘图功能已经成为了许多设计师和创意工作者的必备工具。今天，我们将为大家揭秘一款备受关注的 AI 作图神器 Stable Diffusion，它具有哪些强大的功能和特点。Stable Diffusion 是一款基于开发的作图神器，具有许多强大的功能，包括：1.：Stable Diffusion 可以智能识别用户上传的图片，并自动调整图片质量和色彩，让图片更加清晰、饱满。
可用于Stable Diffusion免费的AI绘画标签生成器
Mr数据杨
05-26 3175
这是一个开源项目，借花献佛，基于原作者的基础上进行了微调还有以及修改内容。支持中英文，权重以及xxxx词汇，老司机都懂。直接可在右侧根据需求进行点选操作，然后复制到自己的Stable Diffusion中进行AI绘画。下载压缩包。
Stable Diffusion【提示词】【艺术摄影】：广告摄影+光线特效
2401_85154887的博客
05-20 739
现在，就让我们一起开启AI的旅程吧！使用stablediffusion能制作以上产品图，出图，新时代AI流行，如果不更紧时代只会被落后，所以我总结了stablediffusionPDF籽料包和全集的stablediffusion视频籽料，以及1.2w+的提示词需要的伙伴点击下方卡片获取哦。
Stable Diffusion【艺术特效】【霓虹灯】：霓虹灯像素化马赛克特效
2401_84760527的博客
05-25 508
主题]的霓虹灯像素化马赛克，高度详细：万享XL_超写实摄影V8.2：Euler a：25：3：在乡村道路上骑自行车的霓虹灯像素化马赛克，高度详细：汽车在一个村庄的道路上的霓虹灯像素化马赛克，非常详细：圣诞节的霓虹灯像素化马赛克，高度详细。
2024最新controlnet详解：Inpaint 局部重绘的使用方法
Yu91an的博客
06-28 2162
在本教程中，我们将介绍如何使用Stable Diffusion WebUI中的ControlNet的inpaint_only预处理器进行AI扩图。通过这一预处理器，您可以轻松地对图像进行局部修复和重绘，使其达到更加理想的效果。
新手小白如何使用SD：从入门到熟悉
weixin_55154866的博客
07-06 3742
对于许多新手小白来说，接触和使用SD（Stable Diffusion）这样的AI绘画软件可能会有些迷茫。SD以其强大的功能和灵活性吸引了许多创作者，但对于初学者来说，如何快速上手并充分利用其功能可能是一个挑战。下面，我们将为新手小白提供一些关于如何使用SD的基本指南和建议。
Flux【基础篇】：Flux&Midjourney&SDXL模型出图对比：细节质量
2401_85688943的博客
08-21 1001
大家好我是极客菌！！！前面和大家分享了Flux在手部和脚生成图片的效果。今天我们看一下Flux在细节质量上面的表现。主要是以下3个模型的对比。Flux.1 DevSD大模型：RealVisXL V4.0 Lightning本文使用的大模型是Flux1. dev-fp8版本。可以通过以下几种方式体验（1）:WebUI相关参数设置：采样方法：FlowMatchEulercfg：3.5采样步数：20（2）：ComfyUI Flux1.dev工作流。
探索图像创新：ControlNetInpaint——你的视觉创意伙伴
gitblog_00032的博客
05-26 493
探索图像创新：ControlNetInpaint——你的视觉创意伙伴 项目地址:https://gitcode.com/mikonvergence/ControlNetInpaint 在这个数字时代，我们常常希望将想象力融入现实世界，而ControlNetInpaint就是这样一个神奇的工具，它能够帮助你在已有图片的基础上进行创新性地修改和重绘。这个开源项目结合了先进的ControlNet模型和S...
Stable Diffusion - ControlNet 插件中扩展局部重绘 InpaintOnly + LaMa 算法与应用
Mystra
07-10 4605
LaMa:尽管现代图像修复系统已经取得了显著的进步，但是在处理大面积缺失、复杂的几何结构和高分辨率图像方面，常常面临挑战。其中一个主要的原因是修复网络和损失函数中缺乏有效的接收视野。为了解决这个问题，提出了一种新的方法，称为LaMa 修复网络在一系列数据集上改进了最新的技术水平，并且在面临挑战的情况下，例如完成周期性结构，也取得了优秀的性能。LaMa 模型令人惊讶地能够很好地适应训练时未见过的更高分辨率，且在参数和时间成本上比竞争基线更低。
【保姆级教程】利用AI转绘成动漫风格，轻松打造稳定不闪的梦幻画风（云服务Linux部署）
Little_Carter的博客
07-29 1449
在本教程中，我们将详细介绍如何利用AI技术将你的照片转绘成动漫风格。无论你是艺术爱好者还是专业创作者，无论你是初学者还是有一定基础的艺术家，本教程都将为你提供详细而具体的步骤和技巧，帮助你轻松掌握AI转绘技术，打造出属于自己的梦幻动漫作品。
Stable Diffusion 类似开源软件
06-25
Stable Diffusion 是一款由德国研究机构 Mind Research Institute 开发的开源人工智能模型，它最初源于著名的生成式语言模型 DALLE-2。这个模型基于深度学习技术，能够生成高质量的文本内容，如图像描述、文章等，并且据称在控制和多样性方面表现出色。 开源软件意味着它的源代码可供所有人免费查看、使用和修改，这通常促进技术创新和社区合作。类似于 Stable Diffusion 的其他开源项目包括： 1. GPT-3：由美国公司 OpenAI 开发的大型预训练语言模型，虽然不是完全开源，但其后续的一些改进版（如 GitHub Copilot）可能是开源的。 2. GPT-Neo：一个由Hugging Face的社区维护的GPT-2模型变体，属于开源项目。 3. LaMDA：Google 的开源对话模型，致力于生成更自然、流畅的对话。 4. OPT (Oriental Model)：Facebook Research 开源的预训练语言模型，具有类似的生成能力。 如果你对这些模型感兴趣，你可以探索它们的GitHub仓库，阅读文档，并参与到开源社区中，与其他开发者一起贡献和学习。相关问题如下：
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值