前几个月AIGC可谓是大热了一把,各种高质量的生成图片层出不穷,而其中最重要的开源模型Stable Diffusion也受到了各种技术商业上的热捧,以很快的速度不断的向前迭代着。
目前最主流的AI绘画平台主要有2种:Midjourney、Stable Diffusion。
Midjourney是一款AI制图工具,你只要给它关键词,它就能透过AI算法生成相对应的图片,而且绘图质量比较高。但目前不仅要收费,而且硬件要求较高,甚至同一个关键词组合每次得到的结果都不尽相同。
相比Midjourney来说,Stable Diffusion的可操作性则更高,有人曾这么简单的形容两者的区别:“Midjourney就像电子产品中的苹果,而Stable Diffusion更像是安卓。两者只是创作方式不同,没有高下之分。”
Stable Diffusion是一个文本到图像的生成模型。给它一个文本指令作为输入,它将返回给你一张与输入指令匹配的图像。
它的工作原理又是什么?
扩散模型(Diffusion Model)
稳定扩散模型(Stable Diffusion)属于深度学习模型中的一个大类,即扩散模型。它们属于生成式模型,这意味着它们是被设计用于根据学习内容来生成相似的新的数据的。对于稳定扩散模型而言,新的数据即为图像数据。
前向扩散(Forward diffusion )
所谓前向扩散(forward diffusion)过程就是向训练图像中不断地添加噪声,从而使其逐渐变为一张毫无意义的纯噪声图。在我们的例子中,前向扩散过程会将猫与狗的图片转变为噪声图。最终你将无法从得到的噪声图中分别出原来的图究竟是猫还是狗(这点很重要)。
这就好比往一杯水中滴入一滴墨水。墨滴将在水中扩散,在几分钟之后,它将随机均匀的遍布于整杯水中,你将再也无法从这杯水中看出原来的墨滴究竟是从杯子的中心还是边缘滴入的了。
逆向扩散(Reverse diffusion)
现在来到神奇的部分了。如果我们能够逆转扩散的过程会怎样呢?就像影片倒带一样,在时间线上逆向移动,那我们最终将会看到墨滴最初是从哪里滴落的了。
那么知道了原理,它又有哪些优势可以为我们所用呢?
接下来,我们就一起看看Stable Diffusion会给我们带来什么样的惊喜吧。
精准把控出图
AI绘画的关键在于图像的精准控制和风格控制,区别于其他AI软件,Stable Diffusion自身拥有众多选项,可以让你“定制”想要的图像效果。
此外,还包括更改图像大小、生成图片数量、采样器等;让你的效果图更加精准!
自定义训练风格模型
Stable Diffusion还有另个强大的功能——能够自定义训练风格模型。倘若现有风格无法满足你的需求,你还可以自己训练特定风格模型。
这相当于你自己在带一个任劳任怨、效率特别高的手下,还有很重要的一点就是,他不会离职!
可构建庞大的“生态”
在Stable Diffusion爆火的同时,Stability.ai官方和业内大佬还研发出一系列免费插件,比如:AI Render、Stability等。
▲ 适配Blender的插件AI Render
而这些插件可以让你在使用其他3D软件(如blender)时,将简单的几何体渲染成详细图像。在不久的将来,Stable Diffusion将拥有一套十分强大的插件生态。
完全免费开源
相较于Midjourney等其他AI平台,Stable Diffusion完全免费开源,而且现在已经拥有超过一千种模型可供你下载,所有代码均在GitHub上公开,任何人都可以拷贝使用。
说到最后
对于建筑设计来说,结果更可控的Stable Diffusion显然更受设计师们的青睐。Stable Diffusion的配置要求并非很高,显存4G以上就可以,不过要求硬盘至少要有50G以上(建议100G),适用于Win10-11版本。
安装包及各种工具包制作人已经为你准备好了,赶紧下载试试吧!
安装配置需求:
a、显存 4GB 以上(建议N卡,如果是自己训练模型,需更高显存)
b、硬盘存储空间,100G 以上
c、操作系统 Win10 及以上
👉AI大模型学习路线汇总👈
大模型学习路线图,整体分为7个大的阶段:(全套教程文末领取哈)
第一阶段: 从大模型系统设计入手,讲解大模型的主要方法;
第二阶段: 在通过大模型提示词工程从Prompts角度入手更好发挥模型的作用;
第三阶段: 大模型平台应用开发借助阿里云PAI平台构建电商领域虚拟试衣系统;
第四阶段: 大模型知识库应用开发以LangChain框架为例,构建物流行业咨询智能问答系统;
第五阶段: 大模型微调开发借助以大健康、新零售、新媒体领域构建适合当前领域大模型;
第六阶段: 以SD多模态大模型为主,搭建了文生图小程序案例;
第七阶段: 以大模型平台应用与开发为主,通过星火大模型,文心大模型等成熟大模型构建大模型行业应用。
👉大模型实战案例👈
光学理论是没用的,要学会跟着一起做,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
👉大模型视频和PDF合集👈
观看零基础学习书籍和视频,看书籍和视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
👉学会后的收获:👈
• 基于大模型全栈工程实现(前端、后端、产品经理、设计、数据分析等),通过这门课可获得不同能力;
• 能够利用大模型解决相关实际项目需求: 大数据时代,越来越多的企业和机构需要处理海量数据,利用大模型技术可以更好地处理这些数据,提高数据分析和决策的准确性。因此,掌握大模型应用开发技能,可以让程序员更好地应对实际项目需求;
• 基于大模型和企业数据AI应用开发,实现大模型理论、掌握GPU算力、硬件、LangChain开发框架和项目实战技能, 学会Fine-tuning垂直训练大模型(数据准备、数据蒸馏、大模型部署)一站式掌握;
• 能够完成时下热门大模型垂直领域模型训练能力,提高程序员的编码能力: 大模型应用开发需要掌握机器学习算法、深度学习框架等技术,这些技术的掌握可以提高程序员的编码能力和分析能力,让程序员更加熟练地编写高质量的代码。
👉获取方式:
😝有需要的小伙伴,可以保存图片到wx扫描二v码免费领取【保证100%免费
】🆓