艺术二维码

最新推荐文章于 2024-07-29 11:25:49 发布
最新推荐文章于 2024-07-29 11:25:49 发布
阅读量332 收藏
点赞数
分类专栏： AI 文章标签： AI作画
原文链接：https://stable-diffusion-art.com/controlnet/#ControlNet_settings
版权

一、安装AUTOMATIC1111

(1)、在 Mac 上安装 AUTOMATIC1111

  • 安装Homebrew，它是 Mac 的包管理器（如果您尚未安装）。打开终端应用程序，键入以下命令，然后按回车键。

    /bin/bash -c "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/HEAD/install.sh)"

  • 安装一些必需的软件包。打开一个新终端并运行以下命令

     brew install cmake protobuf rust python@3.10 git wget

  • 通过在终端中运行以下命令来克隆 AUTOMATIC1111 存储库

    git clone https://github.com/AUTOMATIC1111/stable-diffusion-webui

    stable-diffusion-webui在主目录下创建一个新文件夹。

  • 您将需要一个模型来运行稳定扩散。使用以下链接下载v1.5 模型。

将文件放入文件夹中stable-diffusion-webui/models/Stable-diffusion。完成此步骤后，该Stable-diffusion文件夹应该有两个文件，如下所示。

在这里插入图片描述

(二)、在 Mac 上运行 AUTOMATIC1111

在终端中，运行以下命令。

cd ~/stable-diffusion-webui;./webui.sh --no-half

打开 Web 浏览器并单击以下 URL 以启动稳定扩散。

http://127.0.0.1:7860/

二、安装 ControlNet 扩展 (Windows/Mac)

  • 导航到 Extensions(扩展) 页面。

  • 选择 Install from URL 选项卡。

  • 将以下 URL 放入 URL for extension’s repository 字段的 URL 中。

    https://github.com/Mikubill/sd-webui-controlnet

    单击 “安装” 按钮。

  • 等待表示扩展已安装的确认消息。

  • 重新启动 AUTOMATIC1111。

  • 访问 ControlNet 模型 页面。

  • 下载所有模型文件（文件名以 结尾 .pth）。

    • （如果不想全部下载，可以暂时下载最常用的openpose和canny模型。）

  • 将模型文件放入 ControlNet 扩展的models 目录中。

    stable-diffusion-webui\extensions\sd-webui-controlnet\models

  • 重新启动 AUTOMATIC1111 webui。

如果扩展安装成功，您将在txt2img选项卡中看到一个名为ControlNet的新可折叠部分。它应该位于脚本下拉菜单的正上方。

在这里插入图片描述

三、安装 T2I 适配器

T2I 适配器是神经网络模型，用于为扩散模型的图像生成提供额外的控制。它们在概念上与 ControlNet 类似，但设计不同。

在这里插入图片描述

T2I 适配器模型（来源）。

A1111 ControlNet 扩展可以使用 T2I 适配器。您需要在此处下载模型。获取文件名如下的文件t2iadapter_XXXXX.pth

许多 T2I 适配器的功能与 ControlNet 模型重叠。我只会介绍以下两个。

将它们放入 ControlNet 的模型文件夹中。

stable-diffusion-webui\extensions\sd-webui-controlnet\models

四、更新 ControlNet 扩展

ControlNet 是一个经过快速发展的扩展。发现您的 ControlNet 副本已过时的情况并不罕见。

仅当您在 Windows 或 Mac 上本地运行 AUTOMATIC1111 时才需要更新。该站点的 Colab 笔记本始终运行最新的 ControlNet 扩展。

要确定您的 ControlNet 版本是否是最新的，请将 txt2img 页面上 ControlNet 部分中的版本号与最新版本号进行比较。

选项 1：从 Web-UI 更新

更新 ControlNet 扩展的最简单方法是使用 AUTOMATIC1111 GUI。

  • 转到 Extensions 页面。
  • 在**“Installed”选项卡中，单击“Check for updates”**。
  • 等待确认消息。
  • 完全关闭并重新启动 AUTOMATIC1111 Web-UI。

在这里插入图片描述

选项 2：命令行

如果您熟悉命令行，则可以使用此选项来更新 ControlNet，这样您就可以放心，Web-UI 不会执行其他操作。

步骤 1：打开终端应用程序(Mac) 或PowerShell应用程序 (Windows)。

步骤 2：导航至 ControlNet 扩展的文件夹。（如果您安装在其他地方，请相应调整）

cd stable-diffusion-webui/extensions/sd-webui-controlnet

步骤 3：通过运行以下命令更新扩展。

git pull

五、生成艺术二维码

您首先需要一个二维码。为了增加成功的机会，请使用符合以下条件的二维码。

  • 使用高容错设置 (30%)。
  • QR 码周围有白色边缘（安静区域）。
  • 使用最基本的方形填充黑白和图案。
  • 避免使用在黑色元素之间引入细白线的生成器。

我们将在本教程中使用这个QR 码生成器。

步骤 1：选择文本类型并输入 QR 码文本。

在这里插入图片描述

步骤 2：将容错设置为 30%。

步骤 3：按生成。

在这里插入图片描述

步骤 4：将 QR 码下载为 PNG 文件。

在这里插入图片描述

用稳定扩散装饰二维码

该方法首先使用 img2img 生成类似于 QR 码的图像。但这还不足以生成有效的二维码。ControlNet 在采样步骤期间打开，将 QR 代码印到图像上。在采样步骤接近结束时，ControlNet 被关闭以提高图像的一致性。

分步指南

在 AUTOMATIC1111 WebUI 中，导航到Img2img页面。

步骤1：选择检查点模型。我们将使用GhostMix。

步骤2： 输入提示和否定提示。

提示对于您的成功非常重要。有些提示会与您的二维码自然融合。

我们将使用以下提示。

a cubism painting of a town with a lot of houses in the snow with a sky background, Andreas Rocha, matte painting concept art, a detailed matte painting

以及下面的负面提示。

ugly, disfigured, low quality, blurry, nsfw

步骤 3： 将二维码上传至 img2img 画布。

在这里插入图片描述

步骤 4：输入以下图像到图像设置。

  • 调整大小模式：Just resize
  • 采样方式：DPM++2M Karras
  • 采样步数：50
  • 宽度：768
  • 身高：768
  • CFG 规模：7
  • 去噪强度：0.75

步骤 5：将二维码上传到ControlNet的图像画布。

在这里插入图片描述

步骤 6：输入以下 ControlNet 设置。

  • Enable（启用）：是
  • Control Type（控制类型）: Tile
  • Preprocessor（预处理器）：tile_resample
  • Model（型号）：control_xxx_tile
  • Control Weight（控制重量）：0.87
  • Starting Control Step（起始控制步长）：0.23
  • Ending Control Step（结束控制步长）：0.9

第 7 步：按 “生成” 。

在这里插入图片描述

在这里插入图片描述

第6步：用手机查看二维码。确保检查屏幕上的不同尺寸。有些当它们很大时往往会出现问题。

您不会为每张图片都提供一个实用的二维码。成功率约为四分之一。生成更多图像并检查守门员。

Tips

文本较短的 QR 码成功率较高，因为图案更简单。

并非所有二维码的工作方式都相同。有些可能只能勉强工作，并且只能在一定距离内阅读。

有些提示与二维码融合得更自然。例如，您之前看到的生成屋顶上有雪的房屋的提示与二维码很好地融合在一起，因为它们具有相似的视觉元素。

不同型号和提示的工作参数可能不同。您必须稍微调整以下参数，以将二维码和提示很好地融合在一起。

  • 去噪强度：减少初始构图多跟随二维码。但如果缩小太多，您只会看到二维码。它通常设置为高于 0.7。
  • 控制权重：减少以显示更多提示。
  • 启动控制步骤：增加以显示更多提示。
  • 结束控制步骤：减少提前停止ControlNet，使二维码和图像能够更自然地融合。

Other prompts

机械少女

1mechanical girl,ultra realistic details, portrait, global illumination, shadows, octane render, 8k, ultra sharp,intricate, ornaments detailed, cold colors, metal, egypician detail, highly intricate details, realistic light, trending on cgsociety, glowing eyes, facing camera, neon details, machanical limbs,blood vessels connected to tubes,mechanical vertebra attaching to back,mechanical cervial attaching to neck,sitting,wires and cables connecting to head

ugly, disfigured, low quality, blurry

  • Denoising strength: 0.75
  • Control weight: 1
  • Starting Control Step: 0.23
  • Ending Control Step: 0.7

在这里插入图片描述

在这里插入图片描述

日本女孩

Japanese painting, mountains, 1girl

ugly, disfigured, low quality, blurry, nsfw

  • Denoising strength: 0.75
  • Control weight: 1
  • Starting Control Step: 0.23
  • Ending Control Step: 0.9

在这里插入图片描述
在这里插入图片描述

机器人

light, futobot, cyborg, ((masterpiece),(best quality),(ultra-detailed), (full body:1.2), 1male, solo, hood up, upper body, mask, 1boy, male focus,white gloves, cloak, long sleeves, spaceship, lightning, hires

ugly, disfigured, low quality, blurry

  • Denoising strength: 0.75
  • Control weight: 1
  • Starting Control Step: 0.24
  • Ending Control Step: 0.9

在这里插入图片描述
在这里插入图片描述

Pilotager
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
2023最新AI艺术二维码制作教程【软件工具+教程】.zip
08-02
2023最新AI艺术二维码傻瓜式生成教程，不需要市面上繁琐的安装步骤和显卡的配置要求！我看了一眼市面上的要么只有视频教程，无工具纯纯牛马用来扯淡了。 要么就是安装繁琐，配置要求还高！ 这期教程教大家怎么傻瓜...
【AI】Stable-Diffusion-WebUI使用指南
热门推荐
Goulandis
06-03 1万+
最近AI绘画实现了真人照片级绘画水准，导致AI绘画大火，公司也让我研究研究，借此机会正好了解一下深度学习在AIGC(AI Generated Content)----人工智能自动内容生成领域的应用。
ControlNet v1.1：简短指南
shadowcz007的博客
05-29 526
教程参考：https://stable-diffusion-art.com/controlnet借助 ControlNet，Stable Diffusion 用户终于可以精确地控制对象的位置和外观！Canny边缘检测示例OpenPose人体姿势检测示例Canny 边缘检测器提取主体和背景的相似边缘。它倾向于更忠实地翻译场景。可以看到跳舞的男人变成了女人，但轮廓和发型都保留了下来。OpenPose...
2024最新controlnet详解：T2i-Adapter 的使用方法
Yu91an的博客
06-27 815
T2I-Adapter 是一种轻量级模型，旨在为预训练的 T2I 模型（特别是稳定扩散 (SD) 模型）提供额外指导。总的来说，T2I适配器是一个简单的模型，可以与稳定的扩散模型一起使用，提供额外的条件，可以帮助产生更好的图像。我们将条件图像作为这些模型的输入，并在unet的编码器模型中添加输出特征。t2ia_color_grid预处理器将输入参考图像缩小到原始大小的1/64，然后再将其扩大至回原始尺寸。2. 它很灵活，因为我们可以训练不同的条件模型并且它们可以同时使用。最常使用的是色块固定。
[AI绘画] 即插即用！SDXL+T2I-Adapters 高效可控的生成图片
zero的博客
09-16 1164
标题：T2I-Adapter: Learning Adapters to Dig out More Controllable Ability for Text-to-Image Diffusion Models论文：https://arxiv.org/pdf/2302.08453.pdf博客：https://huggingface.co/blog/t2i-sdxl-adapters代码：https...
T2I-Adapter: 让马良之神笔（扩散模型）从文本生成图像更加可控
wqthaha的专栏
12-20 2045
大规模的text2image模型具有不可置信的生成能力，已经在学习复杂结构和高层语义上展现了超能力。但是，仅依赖文本提示还不够充分挖掘这些能力，特别是在灵活以及准确地控制下（例如颜色和结构）。在这篇文章中，作者尝试去发掘这种T2I模型隐性学习的能力，然后直接使用它们去控制更加有颗粒度的生成。特别地，作者提出学习简单的轻量级的T2I-Adapters去对齐模型内部的知识。
如何使用 Automatic1111 设置 SDXL 1.0 并在本地 PC 上运行(教程含安装步骤)
iCloudEnd的博客
08-09 661
STability AI 最近发布了其第一个正式版本Stable Diffusion XL (SDXL) v1.0。如果您不熟悉稳定扩散，这里有一个简短的概述：Stable Diffusion 是由初创公司 Stability AI 开发的文本到图像 AI 模型。它需要提示并根据该描述生成图像。Stable Diffusion 与其他流行的 AI 图像模型（例如 OpenAI 的 Dall-E2 或 MidJourney）的区别在于它是开源的。这意味着任何人都可以使用它或为其开发做出贡献。
uniapp小程序端普通二维码，彩色二维码，艺术二维码的生成
05-17
在本文中，我们将深入探讨如何在uniapp小程序端生成普通二维码、彩色二维码以及艺术二维码。uniapp是一个跨平台的应用开发框架，它允许开发者使用一套代码库来构建iOS、Android、Web、微信小程序等多个平台的应用。...
JavaScript基于qrcode.js带Logo彩色二维码(彩色艺术二维码)
03-24
在本文中，我们将探讨如何利用qrcode.js库创建带有Logo和彩色的艺术二维码。 首先，qrcode.js是由Davidshimjs开发的一个轻量级的JavaScript库，它允许开发者在浏览器环境中生成二维码。这个库简单易用，只需几行...
js艺术二维码生成插件
12-10
**JavaScript 艺术二维码生成插件：ArtQRCode** ArtQRCode 是一个创新的二维码生成工具，它基于流行的 `qrcode.js` 库进行了封装，使得二维码的生成变得更加丰富多彩。这个插件的独特之处在于它支持以图片元素作为...
AI绘画 stablediffusion 艺术二维码教程
09-22
【AI绘画 stablediffusion 艺术二维码教程】是一个详细的教程，旨在教用户如何利用AI技术创作出具有艺术感的二维码。这个教程涵盖了从模型下载到艺术二维码的生成过程，适合对AI艺术和二维码设计感兴趣的用户。 ...
T2IAdapter代码解读
最新发布
Qiming的博客
07-29 263
T2IAdapter代码解读
探索前沿AI：TencentARC的T2I-Adapter项目解析与应用
gitblog_00086的博客
03-22 502
探索前沿AI：TencentARC的T2I-Adapter项目解析与应用 项目地址:https://gitcode.com/TencentARC/T2I-Adapter 在这个数字化的时代，人工智能（AI）已经成为技术创新的重要驱动力。今天，我们将深入探讨一个由腾讯ARC团队推出的开源项目——T2I-Adapter。这是一个致力于模型转换和适配的工具，旨在加速AI模型在不同场景下的落地应用。 项目...
不吃电脑配置！不花一分钱！手把手教你生成SD机械风格的图标
2401_84830464的博客
05-13 824
AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。
在本地跑一个AI模型(7) - 你打草稿，模型来画
阿不的博客
04-22 846
从图片质量可以看出，ControlNet对于引导图的遵循和生成图片的质量都较Adapter高，具体使用情况如何，大家在使用前还是自己测试一下。本文首发于：https://babyno.top/posts/2024/04/run-stable-diffusion-locally3-guide-image-generation/公众号：机器人小不。
文生图可控生成之T2I-adapter原理
orangerfun的博客
02-05 1367
t2i adapter原理
Ai作图工业化流程工具
liangwqi的博客
03-16 3260
AI流水线作图，蓝图模式设计师和、技术、场景、前处理流程、后处理流程协统
人工智能AI图像风格迁移(StyleTransfer),基于双层ControlNet(Python3.10)
刘悦的技术博客
04-21 2651
图像风格迁移（Style Transfer）是一种计算机视觉技术，旨在将一幅图像的风格应用到另一幅图像上，从而生成一幅新图像，该新图像结合了两幅原始图像的特点，目的是达到一种风格化叠加的效果，本次我们使用Stable-Diffusion结合ControlNet来实现图像风格迁移效果。
uniapp艺术二维码
08-06
如果你想在UniApp中实现艺术二维码，可以使用专门的插件或者自己编写代码来实现。 一种常见的做法是使用第三方库来生成艺术二维码，并将生成的二维码图片展示在UniApp中。你可以搜索一些支持艺术二维码生成的...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值