动手训练自己的AI绘画LoRA：宝可梦

于 2024-08-01 10:55:15 发布
阅读量534 收藏
点赞数 22
分类专栏： 大模型AIGC 计算机视觉 文章标签： AI作画 计算机视觉 prompt 人工智能
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u011239443/article/details/140842110
版权

重磅推荐专栏：
《大模型AIGC》
《课程大纲》
《知识星球》

本专栏致力于探索和讨论当今最前沿的技术趋势和应用领域，包括但不限于ChatGPT和Stable Diffusion等。我们将深入研究大型模型的开发和应用，以及与之相关的人工智能生成内容（AIGC）技术。通过深入的技术解析和实践经验分享，旨在帮助读者更好地理解和应用这些领域的最新进展

在这里插入图片描述

宝可梦 数据集

https://huggingface.co/datasets/lambdalabs/pokemon-blip-captions
中文版数据集：
https://huggingfac

了解本专栏 订阅专栏 解锁全文 超级会员免费看
小爷毛毛（卓寿杰）
关注
  • 22
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
订阅专栏
深度学习与PyTorch入门实战教程
01-30
亚洲排名第1的新加坡国立大学AI团队倾情打造，资深研究员龙龙老师主讲，帮助人工智能、深度学习初学者快速、深刻理解深度学习算法原理与实践。【莫烦老师】权威推荐：在教学中，龙龙老师以简短高效的方式，从深度学习的多个角度向我们展开了论述，非常适合想对深度学习有全方位了解的朋友。【PyTorch中文网】：讲解简单易懂、由浅入深，是一门值得推荐的课程。课程特色：1. 通俗易懂，快速入门对深度学习算法追本溯源、循序渐进式讲解，学员不需要任何机器学习基础，只需要写过代码即可轻松上手。2. 实用主导，简单高效使用新手最容易掌握的深度学习框架PyTorch实战，比起使用TensorFlow的课程难度降低了约50%，而且PyTorch是业界最灵活，最受好评的框架。3. 案例为师，实战护航基于计算机视觉和NLP领域的经典数据集，从零开始结合PyTorch与深度学习算法完成多个案例实战。4. 持续更新，永久有效一次购买，永久有效。深度学习课程会持续更新下去，内容和学术界最前沿算法保持同步。
训练Lora
popoala的专栏
03-23 948
lora使用
基于LoRA进行Stable Diffusion的微调
dzysunshine的博客
07-25 4879
微调时只需要使用以下命令运行 train_text_to_image_lora.py 文件即可。需要根据下载的路径文件地址对相应的参数进行修改，如。样本数据量为883，这里设置了train_batch_size为2，max_train_steps为7500，数据集一共883条样本，包含两个部分：image（图）和 text（文），如下图所示。也可以根据GPU资源调整相应的参数，如。显存占用约11个G，训练时长约8个小时左右。使用git clone命令下载数据集。
使用 Amazon SageMaker 运行基于 LoRA 的 Stable Diffusion fine tuning 及推理
亚马逊云科技专栏
05-26 1067
什么是 LoRA很多小伙伴接触 LoRA 是 Stable Diffusion 的 LoRA 模型，用于人物和风格训练，但本质上 LoRA 并不专为 Stable Diffusion 服务。LoRA 英文全称 Low-Rank Adaptation of Large Language Models，是微软开源的解决大模型微调而开发的一项技术。大模型参数规模巨大，比如 GPT-3 有1750亿参数，...
stable diffusion微调总结
qq128252的博客
02-02 3779
SDXL 潜在一致性模型 （LCM） 如“潜在一致性模型：使用几步推理合成高分辨率图像”中提出的那样，通过减少所需的步骤数彻底改变了图像生成过程。它将原始 SDXL 模型提炼成一个需要更少步骤（4 到 8 个而不是 25 到 50 个步骤）来生成图像的版本。该模型对于需要在不影响质量的情况下快速生成图像的应用特别有利。值得一提的是，它比原来的 SDXL 小 50%，快 60%。SDXL Distilled 是指为特定目的而“蒸馏”的 SDXL 模型版本。例如，Segmind 稳定扩散模型 （SSD-1B）
AI绘画教程：如何训练出美美哒的Lora人像模型？
05-29
AI绘画教程：如何训练出美美哒的Lora人像模型？ AI绘画教程：如何训练出美美哒的Lora人像模型？这篇教程旨在指导读者如何训练出自己专属的Lora人像模型，生成各种精彩的图片。以下是这篇教程的知识点总结： 一、...
《AI 研发提效研究：自己动手训练 LoRA》包含 Llama （Alpaca LoRA）、ChatGLM 相关 Lora 训练
08-21
《AI 研发提效研究：自己动手训练 LoRA》，包含 Llama （Alpaca LoRA）模型、ChatGLM （ChatGLM Tuning）相关 Lora 的训练。训练内容：用户故事生成、测试代码生成、代码辅助生成、文本转 SQL、文本生成代码…….zip
AI绘画教程：如何用Stable Diffusion训练出自己专属的人像模型？
05-29
AI绘画教程：如何用Stable Diffusion训练出自己专属的人像模型？ Stable Diffusion 是一种基于深度学习的图像生成模型，可以生成高质量的人像模型。今天，我们将介绍如何使用 Stable Diffusion 和 Textual ...
lora:low-rank adaption of large language models
liguandong
03-10 2679
根据之前的一些工作，发现大模型其实是过参数化的， 有更小的一个内在维度，于是文章做了一个假设，模型在任务适配过程中，参数的改变量是低秩的，在训练过程中，lora单独去学习这个改变量，而不是去学习模型的参数，通过把最终训练得到的参数分解为原参数W0和该变量deltaW进行相加，论文假设deltaW是低秩的，把deltaW进一步拆分为低秩矩阵A和低秩矩阵B，如图1所示，而在推理的过程中，由于模型参数已经固定不再变动，这时候把模型的改变量直接放到模型里，这样在推理的计算过程中，就避免了一次额外的矩阵乘法开销。
diffusion lora chinese tutorial，虚拟idol训练中文教程.zip
09-20
这是一个区别于automatic1111 webui,对开发者更友好的lora训练，或者说虚拟idol训练 数据准备 huggingface数据[option] pokemon数据为例 # 下载数据 mkdir -p dataset cd dataset git clone https://huggingface.co/datasets/lambdalabs/pokemon-blip-captions/ 用户数据[option] 单张图片的lora训练 # 图片文本获取 python process/run_caption.py --img_base ./dataset/custom # 将a woman 替换成<dlrb> python process/change_txt.py --img_base ./dataset/custom --ori_txt 'a woman' --new_txt "<dlrb>" 训练 参数调整self.custom = True为True使用用户数据，False使用huggingfaec数据 --train_text_encoder # 开启te
The Complete Pokemon Dataset 完整的口袋妖怪数据集-数据集
03-04
该数据集包含有关所有七代神奇宝贝的所有802神奇宝贝的信息。 pokemon.csv
使用 LoRA 进行 Stable Diffusion 的高效参数微调
Hugging Face
02-09 6204
LoRA: Low-Rank Adaptation of Large Language Models 是微软研究员引入的一项新技术，主要用于处理大模型微调的问题。目前超过数十亿以上参数的具有强能力的大模型 (例如 GPT-3) 通常在为了适应其下游任务的微调中会呈现出巨大开销。LoRA 建议冻结预训练模型的权重并在每个 Transformer 块中注入可训练层 (秩-分解矩阵)。因为不需要为大多数...
Pokemon数据集实战训练
Saxon_zhu的博客
04-14 784
Pokemon数据集的实战训练
huggingface 数据集datasets 和 pandas方式下载
最新发布
weixin_42357472的博客
07-03 262
但是国内下载一般由于网络下载失败：ConnectionError: Couldn’t reach ‘reach-vb/pokemon-blip-captions’ on the Hub (ConnectionError)
huggingface的diffusers训练stable diffusion记录
weixin_50161877的博客
03-14 1311
代码：https://github.com/huggingface/diffusers/tree/main/examples/text_to_image论文。
从hugging face下载数据集，将.parquet类型数据中提取图片和标签
beneficial的博客
01-19 2831
从hugging face下载数据集，将.parquet类型数据中提取图片和标签
TensorFlow实战——CNN（VGGNet19）——图像风格转化
热门推荐
06-25 2万+
这次我们要做一件比较有趣的事——讲图像风格转化。如何将一张杭州西湖图片：将其风格转化为和梵高的《星夜》一样具有鲜明艺术的风格呢？先给出完整的代码：https://github.com/xiaoyesoso/TensorFlowinAction/blob/master/InActionB2/chapter4/tranImage.py接下来我们来讲解它。
自己动手训练LoRA
08-27
自己动手训练LoRA是指通过实践和操作来学习和训练LoRA技术。根据引用中提到的《AI 研发提效研究：自己动手训练 LoRA》的内容，其中包含了Llama（Alpaca LoRA）模型和ChatGLM（ChatGLM Tuning）相关Lora的训练。具体的训练内容包括用户故事生成、测试代码生成、代码辅助生成、文本转SQL、文本生成代码等。这些训练内容可以帮助学习者更好地理解和应用LoRA技术。为了更好地掌握LoRA，可以先熟悉其基本原理和PEFT中的实现，然后进行自己动手实践，通过实践来加深对LoRA的理解。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [LLaMA-AIpaca（一）：LLM+LoRa微调加速技术原理及基于PEFT的动手实践：一些思考和mt0-large+lora完整案例](https://blog.csdn.net/u013250861/article/details/131218221)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* [《AI 研发提效研究：自己动手训练 LoRA》包含 Llama （Alpaca LoRA）、ChatGLM 相关 Lora 训练](https://download.csdn.net/download/qq_35831906/88237971)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

小爷毛毛（卓寿杰）

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值