Datawhale 夏令营第四期 大模型应用技术开发 笔记2

• Datawhale 夏令营第四期 AIGC 笔记2

  • AI生图介绍

    • 为什么要了解AI生图前沿

      • - 对于普通人来说，可以避免被常见的AI生图场景欺骗，偶尔也可以通过相关工具绘图

      • - 对于创作者来说，通过AI生图的工具可以提效，快速制作自己所需要的内容

      • - 对于技术人来说，了解AI生图的能力的玩法，可以更好地针对自己的业务进行开发和使用，甚至攻克难题开发更实用的工具

    • AI生图模型属于多模态机器学习模型，通过海量的图库和文本描述的深度神经网络学习，最终的目标是可以根据输入的指示(不管是文本还是图片还是任何)生成符合语义的图片。

    • 恐怖谷效应

      • 随着仿真物(如机器人、玩偶等)模拟真实性程度的变化，人们对其亲和力也会产生变化，一般规律是亲和力随着仿真程度增高而增高，但当仿真程度达到一个临界点时，人的亲和反应会陡然跌入谷底，突然产生排斥、恐惧、困惑等负面心理。

    • AI生图原理

      • AI生图模型获得图片生成能力主要是通过 学习 图片描述 以及 图片特征，尝试将这两者进行一一对应，存储在自己的记忆里。在我们需要的时候，通过输入的文字，复现出来对应的图片特征，从而生成了我们需要的图片。

    • 如何辨别AI生图

      • - 观察图片的细节。仔细检查人物的面部特征，尤其是眼睛和嘴巴

      • - 检查光线和阴影。分析图片中的光源是否一致，阴影的方向是否与光源相符，是否存在不自然的光线或阴影

      • - 分析像素。放大图片，寻找是否有模糊或像素化的部分。

      • - 注意背景。检查背景中是否有不协调的元素，比如物体边缘是否平滑，背景中是否有不自然的重复模式。

  • 如何使用通义千问解读代码

    • 1. 分析代码的主体架构

      • 1.1 输入的Prompt

        • 你是一个优秀的python开发工程师，现在我们需要你帮我们分析这个代码的主体框架，你需要把代码按照工作流分成几部分，用中文回答我的问题。{此处替换前面的代码}

      • 1.2 返回的结果

    • 2. 逐行解释代码

      • 2.1 输入的问题

        • 你是一个优秀的python开发工程师，现在我们需要你帮我们逐行分析这个代码，用中文回答我的问题。{此处替换前面的代码}

      • 2.2 返回的结果

    • 3. 代码还有疑问？

      • 3.1 向AI追问

        • 在刚刚逐行解析结果页后面继续追问，如图，通义给了我们更加细致的问题解释，大家可以举一反三，多操作一下

        • 我对其中{替换成你的问题}还是不太理解，给我再详细介绍一下

  • 实战演练

    • 1、向通义千问输入提示

      • 你是一个文生图专家，我们现在要做一个实战项目，就是要编排一个文生图话剧 话剧由8张场景图片生成，你需要输出每张图片的生图提示词 具体的场景图片

      • 1、女主正在上课 2、突然睡着了 3、她去到了一个武侠世界，她拿着纸伞立在桥上 4、一个翩翩带剑侠客坐船缓缓而来 5、两人一见钟情 6、一起坐在船上 7、下课了，梦醒了 8、又回到了学习生活中 生图提示词要求

      • 1、风格为古风 2、根据场景确定是使用全身还是上半身 3、人物描述 4、场景描述 5、做啥事情 例子： 古风，水墨画，一个黑色长发少女，坐在教室里，盯着黑板，深思，上半身，杏色长裙

    • 2、通义千问返回提示词

      • 女主正在上课：古风，淡墨勾勒，一位身穿青衣的少女，长发束起，端坐在古朴的书桌前，手执毛笔，聚精会神地书写，上半身特写，背景为竹简和书籍堆砌的书架。

      • 突然睡着了：古风，细腻笔触，同一少女，头轻轻侧靠在桌上，手中毛笔垂落，嘴角带着一丝微笑，上半身，背景为半掩的窗户透进柔和的阳光。

      • 她去到了一个武侠世界，她拿着纸伞立在桥上：古风，工笔描绘，少女换上轻纱长裙，手持精致纸伞，立于拱桥之上，远眺湖面，全身，背景为烟波浩渺的湖水与远处的山峦。

      • 一个翩翩带剑侠客坐船缓缓而来：古风，写意手法，一位英俊潇洒的青年，腰佩长剑，着一袭白衣，正悠然地乘坐小舟靠近，全身，背景为水面荡漾的涟漪以及轻柔飘动的柳枝。

      • 两人一见钟情：古风，柔美线条，少女与青年相对而立，目光交汇，含情脉脉，上半身特写，背景为轻雾缭绕的小桥流水。

      • 一起坐在船上：古风，细腻刻画，两人并肩坐在装饰精美的小舟上，少女依偎在青年身旁，两人脸上洋溢着幸福的笑容，全身，背景为落日余晖下的湖光山色。

      • 下课了，梦醒了：古风，淡雅色彩，少女再次出现在教室里，揉着眼睛从梦中醒来，上半身，背景为同学们陆续离开的身影和窗外渐暗的天色。

      • 又回到了学习生活中：古风，清新笔触，少女精神焕发地坐在书桌前，认真阅读，周围摆放着文房四宝，上半身，背景为书卷满架的书房。

    • 3、在代码中修改提示词

    • 4、获得最终结果

    • 

  • 从结果上看，背景跨越了古代、现代、中外，效果不甚理想，有待进一步优化提示词