精读AI文生图知识相关
-
文生图主要以SD系列基础模型为主,以及在其基础上微调的lora模型和人物基础模型等。文生图主要以SD系列基础模型为主,以及在其基础上微调的lora模型和人物基础模型等。现代的AI生图模型大多基于CNN,GAN等网络。2021.1 DALL-E则是GPT3语言处理的衍生版本。AI生图模型多属于多模态机器学习模型,其根据输入指示生成符合语义的图片。
-
了解Ai 生图能力与极限,普通人可以尽量避免被骗,创作者可以提高效率。
-
难点挑战:生成的图细节处理不行,或者画面逻辑有问题
这也让我们目前可以辨别AI,如观察图片细节,光线阴影,分析像素和背景 -
Kolors 模型支持中文 promt, 更适合学习
-
在学习代码的过程中不懂的问题可以问大语言模型如 chatgpt, 通义千问。
-
如何用 baseline 框架生成自己风格的模型和图片呢:
6.1数据加载和预处理
6.2 使用 DataJuicer 配置文件定义数据处理规则,并进行数据清洗和过滤
6.3 使用DiffSynth-Studio进行模型微调
6.4 加载微调后的模型并进行图像生成