Datawhale X 魔搭 AI夏令营 AIGC方向笔记

目录

代码与出图

设定

代码

prompt方法

---

 

代码与出图

设定

小学篱笆旁的蒲公英
是记忆里有味道的风景
午睡操场传来蝉的声音
多少年后也还是很好听
将愿望折纸飞机寄成信

小粉和小紫是幼儿园同学，也是好朋友，两人约定长大后一起成为偶像明星。

但幼时小紫搬家离开，小粉逐渐遗失了她的联系方式。

多年以后，小紫追逐梦想，站上了最高的舞台。

小粉决定参与小紫担任评委的选秀节目，追寻两人曾经的梦想。

最终，小粉高人气C位出道。

小粉成为了知名偶像，在便利店购物时经常有粉丝合影。

她为小紫的新歌曲吉他伴奏，两人一起在古堡中拍摄了歌曲的MV。

拍摄结束后，走在广场上，人群川流不息，最高处的LED屏幕上是两人的广告宣传，过去，曾经，未来在此刻勾连，小粉和小紫相视一笑。

代码

先在terminal下载baseline。然后将生成图片部分的prompt指令调整成下面代码。

git lfs install
git clone https://www.modelscope.cn/datasets/maochase/kolors.git

torch.manual_seed(0)
image = pipe(
    prompt="二次元，日系动漫，画面中央是舞台。镁光灯洒下。光影。",
    negative_prompt="丑陋、变形、嘈杂、模糊、低对比度",
    cfg_scale=4,
    num_inference_steps=50, height=1024, width=1024,
)
image.save("1.jpg")

torch.manual_seed(1)
image = pipe(
    prompt="二次元，日系动漫，选秀大楼，一个粉色短发小女孩提着行李，零星几个练习生，交谈",
    negative_prompt="丑陋、变形、嘈杂、模糊、低对比度",
    cfg_scale=4,
    num_inference_steps=50, height=1024, width=1024,
)
image.save("2.jpg")

torch.manual_seed(2)
image = pipe(
    prompt="二次元，日系动漫，一个粉色及肩中等长度头发小女孩，站在舞台上，戴着皇冠，穿着演出服跳舞，神色高兴，镜头拉远，台下是观众鼓掌",
    negative_prompt="丑陋、变形、嘈杂、模糊、低对比度，色情擦边",
    cfg_scale=4,
    num_inference_steps=50, height=1024, width=1024,
)
image.save("3.jpg")

torch.manual_seed(5)
image = pipe(
    prompt="二次元，一个粉色及腰长发小女孩偶像，便利店购物，偶遇一名粉丝，两个人对着手机一起合照，其乐融融，和谐快乐",
    negative_prompt="丑陋、变形、嘈杂、模糊、低对比度，扭曲的手指，多余的手指",
    cfg_scale=4,
    num_inference_steps=50, height=1024, width=1024,
)
image.save("4.jpg")

torch.manual_seed(0)
image = pipe(
    prompt="二次元，阳光下，综艺拍摄，校园操场，一个粉色短头发小女孩，一个紫色短头发小女孩穿着黑裙子",
    negative_prompt="丑陋、变形、嘈杂、模糊、低对比度",
    cfg_scale=4,
    num_inference_steps=50, height=1024, width=1024,
)
image.save("5.jpg")

torch.manual_seed(1)
image = pipe(
    prompt="二次元，一个粉色中等长度头发小女孩弹吉他，一个紫色中等长度头发小女孩穿着黑裙子，唱歌",
    negative_prompt="丑陋、变形、嘈杂、模糊、低对比度",
    cfg_scale=4,
    num_inference_steps=50, height=1024, width=1024,
)
image.save("6.jpg")

torch.manual_seed(7)
image = pipe(
    prompt="二次元，一个粉色长头发女孩，一个紫色长度头发女孩，一起进行MV拍摄。她们的表情看起来有些认真或深沉。背景是一座宏伟的教堂内部，有高耸的天花板、彩色玻璃窗。一只白色的鸽子飞翔在空中，周围还有一些红色的玫瑰装饰。整体氛围显得庄重而神秘。",
    negative_prompt="丑陋、变形、嘈杂、模糊、低对比度",
    cfg_scale=4,
    num_inference_steps=50, height=1024, width=1024,
)
image.save("7.jpg")

torch.manual_seed(0)
image = pipe(
    prompt="二次元，角落里，粉色长发少女，紫色长发少女，在马路上相视一笑。画面拉高，画面主体部分是高楼大厦，人来人往，少女们仰望高楼上的LED大屏幕，LED大屏幕上是粉发少女和紫发少女上一场的演出合影",
    negative_prompt="丑陋、变形、嘈杂、模糊、低对比度",
    cfg_scale=4,
    num_inference_steps=50, height=1024, width=1024,
)
image.save("8.jpg")

优化prompt方法

可以先输入prompt，生成图片，然后打开大模型应用，如智谱清言，输入图片，获得图片的描述性语言。然后精简成prompt，输入prompt。

如第七张图片，可获得如下描述。

这是一张描绘两位动漫风格的女性角色的图片。她们站在一座装饰华丽的教堂内，背景是彩色玻璃窗和一些红色玫瑰花。
1. 左边的女性角色有着粉色的长发，穿着一件白色的连衣裙，她的表情显得有些惊讶或困惑。
2. 右边的女性角色则有着紫色的长发，穿着一件淡紫色的露肩上衣，她的表情看起来比较平静。
3. 两只白鸽在空中飞翔，增添了一丝宁静和平和的气氛。
4. 整体上，这张图片给人一种温馨、神秘的感觉。

精简以上描述，重新写prompt即可。