详细拆解!我的AI国风古诗视频创作流程

前言

最近,我创作了一批主题为《AI画古诗》的系列视频作品,通过中国风的画面来还原古代诗歌中的场景,表达一种独属于中国的浪漫。

这些视频发布到快手、抖音、视频号、小红书等平台后,也收获了一些关注和私信。有很多朋友觉得这种视觉化呈现古诗的形式挺好的,很唯美,而且适合学习记忆诗词。

特别是有学校的老师,和我交流说觉得这种形式表现在教学方面挺适用的。

很多粉丝也在后台询问这种视频的制作方法,那今天,我就详细地带大家来拆解一下《AI画古诗》的制作流程。

#****01

脚本创作

这个视频全程是用可图和可灵来进行制作的,模型是来自我们中国的快手团队。它们出图片和视频的效果不仅在世界上名列前茅,而且特别适合去体现中国文化,对国风水墨和传统意象有着很专业的理解。

那具体有多专业呢,就这么说吧,有很多时候,我都是直接把诗词甩过去,就能出很漂亮的图片了。

比如说“千里江陵一日还”

“独钓寒江雪”

“枯藤老树昏鸦”

“江清月近人”

“牧童遥指杏花村”

但是,也并不是所有的诗句都可以通过直接输入来生成。比如“羌笛何须怨杨柳”这句诗,对于AI来说,提示词中出现了“羌笛”和“杨柳”两个意象,所以在出图的时候我们得到结果是这样的。

画面中有杨柳,也有吹着羌笛的士兵,但实际上,这个画面表现是不符合歌词意境的。因为这首诗实际上描写的是边塞的荒凉景象,表达的是远征的士兵对家乡的思念。所以虽然歌词中有杨柳,但是杨柳实际上是不必出现的。

遇到这样的情况,我就会让kimi帮我具体描绘一下每个诗句的画面,然后就可以使用它描述出来的这句话“边关的士兵吹奏着羌笛,笛声中透露出对家乡的深深思念”作为提示词。

这样绘制出来的画面就更符合诗词的意境了。

当然除了借助AI工具之外,很多时候我们还是要自己描写提示词来绘制画面的。比如李商隐的《登乐游原》中的最后一句“只是近黄昏”,在kimi的描述中都是比较抽象的描写,但是出画面是需要告诉AI具体的绘画信息的。

所以,我就通过提示词描述了一朵夕阳下枯萎的花来表示这个意象,这样能使整首诗词的表达更加完整一点。

#****02

文生图

接下来就是关键的文生图了。

因为出图主要用到的是可图,所以我们需要先找到这个大模型。

大家可以在哩布哩布搜索这个大模型,并加入模型库。

然后再搜索“SD炼丹师忠忠”的这款“国风描金插画”的lora,一并加入模型库。

这样,就可以使用可图来进行在线的图片创作了。

不过要想得到更好的出图效果,我建议还是使用comfyui来进行绘制。要使用这个工作流,需要安装专门针对ComfyUI的MZ 节点,下载地址:GitHub - MinusZoneAI/ComfyUI-Kolors-MZ: Kolors的ComfyUI原生采样器实现(Kolors ComfyUI Native Sampler Implementation)

Kolors Utils节点,下载地址:GitHub - lrzjason/Comfyui-kolors-Utils:用于 kolors 的 Utils

大模型放在这个路径中……\ComfyUI-aki-v1.3\models\unet

工作流和大模型我已经放在网盘中,大家可以后台回复【可图】来领取。

安装好之后就可以直接输入中文进行生图了,其他参数按照默认就行。

生图尺寸和批次大小根据你的显卡能力酌情调整。

画面的唯美程度比哩布哩布上出的要好一些,水墨的质感很强。

#****03

图生视频

图生视频我这边使用的主要是可灵,目前应该是世界范围内,ai生图的第一梯队。

它每天会有66积分的免费额度,可以生成6个视频。你也可以使用不同的手机多注册几个账号。

正常的风景类视频成功率还是很高的,大部分一刷就搞定了。

如果是人物动作就需要多刷几次了。

有些时候,我也会用到首尾帧来连接起两个画面。

比如《鹊桥仙》中的“飞星传恨,银汉迢迢暗度”这句诗,我就用一段镜头衔接,把这两个画面串了起来。

这里分享给大家一份Adobe大神整理的《AIGC全家桶学习笔记》,相信大家会对AIGC有着更深入、更系统的理解。

有需要的朋友,可以点击下方免费领取!

在这里插入图片描述

AIGC所有方向的学习路线思维导图

这里为大家提供了总的路线图。它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。如果下面这个学习路线能帮助大家将AI利用到自身工作上去,那么我的使命也就完成了:
在这里插入图片描述

AIGC工具库

AIGC工具库是一个利用人工智能技术来生成应用程序的代码和内容的工具集合,通过使用AIGC工具库,能更加快速,准确的辅助我们学习AIGC
在这里插入图片描述

有需要的朋友,可以点击下方卡片免费领取!

在这里插入图片描述

精品AIGC学习书籍手册

书籍阅读永不过时,阅读AIGC经典书籍可以帮助读者提高技术水平,开拓视野,掌握核心技术,提高解决问题的能力,同时也可以借鉴他人的经验,结合自身案例融会贯通。

在这里插入图片描述

AI绘画视频合集

我们在学习的时候,往往书籍源码难以理解,阅读困难,这时候视频教程教程是就很适合了,生动形象加上案例实战,科学有趣才能更方便的学习下去。

在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值