这是一篇关于字节智能体平台扣子制作工作流的笔记。
最近逛抖音、B站总是能看到什么一口看完的小说,总体就AI是读小说,根据小说句子生成相关图片,然后图片跟字幕配合在一起,合成一个视频。看着感觉能用工作流实现,于是便想尝试一下。
1.生成图文视频的流程
简单构造了一个流程图如下:
流程图比较简单,构思好后就可以开始着手搭建工作流了。
2.搭建扣子工作流
先展示一下完整的工作流:
因为只是临时想法还没有进一步完善,这里的工作流就比较简单。
2.1文本处理
文本分段处理就简单的使用了扣子的文本处理组件,分隔符我这里是只使用了句号,如果想要让生成的AI音频更顺畅,就可能需要自己处理一下文本,这里只做简单的演示不多赘述。
2.2语音生成
语音生成也是调用免费的语音插件,用批处理来生成文本分段数量的语音数量。
2.3图像生成
图像生成用一个循环来让文本一一对应生成AI图片。
图像生成模型就简单选用动漫模型,提示词就引用分段好的文字还有一些小说风格相关的关键词 2.4生成视频草稿
接下来就是生成视频的草稿,可以用create_draft插件来规定视频的长宽。 然后将分段好的文字,生成的语音,生成的AI图片用easy_create_material插件将这些结合成视频,然后输出草稿链接。
2.5将视频导出
用剪映小助手可以直接将视频的草稿导入到剪映中,就可以看到生成的视频了。将链接直接输入就可以了。
3.总结
这是偶然想出来的工作流,比较简陋,再进一步完善的话可以自动添加音乐,或者语音更准确之类的,由此可见,扣子工作流还是能实现很多事情。