Omost 结合 ComfyUI 这奇妙的化学反应让 AI 绘画更加简单!

先说个题外话,今天最火的应该是快手发布的文生视频大模型:可灵大模型了,看到内测群里大家的作品分享,那真的是相当精彩,不输 sora,可惜安琪我的的申请还在排队,今晚是写不了了,估计等这篇文章发布的时候已经有很多相关的测评文章了。
在这里插入图片描述

好了,不纠结,我们回归今天的主题,之前听雨不是分享了 ControlNet 作者最新发布 AI 绘画工具:Omost,不知道小伙伴们去尝试了没?

上一篇在 demo 上演示了下效果,虽然效果不错,但是出图的质量还是有些堪忧的,毕竟没法使用各种 SD1.5 或者 SDXL 大模型。

不过前天分享的时候,就已经有大神把 Omost 集成到 ComfyUI 中了,只不过时间关系没来得及试,今天咱们就来补一下。

这个 ComfyUI 插件补足了 Omost 没法选择绘画大模型的尴尬,嗯嗯,就是在 ComfyUI 中既可以得到 Omost 的扩展提示词的功能和空间构图能力,又能选择自己喜欢的大模型进行绘画,那是相当愉快有么有。

好了,话不多说,我们直接开整。

插件名:ComfyUI_omost,需要通过 Git URL 进行安装。

插件地址:(需要的同学可以自行扫描获取)
在这里插入图片描述

在这里插入图片描述

安装好以后重启 ComfyUI 就可以了。

模型会在第一次运行的时候自动下载。

工作流截不全就截取一部分吧,以下是主要的 Omost 节点,另外没有截取的一部分是基础的文生图工作流,相当于把正向提示词框改成了以下的节点。

完整的工作流会放在文末的网盘里。

在这里插入图片描述

我们简单来介绍一下主要的节点吧,加载模型的节点,一共有三个模型可供选择,第一次使用的时候会自动下载。

在这里插入图片描述

这里主要是填写我们的基础提示词,不过只能用英文哦!

max_new_tokens:大语言模型的一个文本单位,令牌数,和返回文本的最大数量有关。

top_p:这是一个控制生成文本多样性的参数,值越大,创造性越强。

temperature:温度值,这个参数控制生成文本的随机性,温度越高,文本的随机性越强,也越不稳定。

下边两个参数不用介绍了吧,随机种子数,可以选择固定也可以随机或者递增或递减。

在这里插入图片描述

global_strength:全局强度。

region_strength:区域强度。两个都是用来控制蒙版层的强度。

主要讲下 overlap_method,这里有两种图层重叠处理方法,一个是覆盖「Overlay」,一个是平均「Average」。

覆盖「Overlay」:这种方法意味着当两个图层重叠时,上面的图层会完全覆盖下面的图层。换句话说,如果两个图层在同一区域有像素,那么只有上面图层的像素会显示出来,而下面图层的像素则被隐藏或忽略。

平均「Average」:这种方法在处理重叠区域时,会计算所有重叠条件的平均值。如果两个图层在同一区域有像素,那么显示的像素将是这两个像素值的平均。这通常用于图像合成,可以创建平滑的过渡效果,避免硬边缘。

简单理解就是平均相当于覆盖来说,图像过渡会更加的平滑,融合度会更高。

在这里插入图片描述

可以简单通过蒙版来看下效果,看着覆盖就是棱角很明显的那种,平均就会有一种过渡的感觉。

在这里插入图片描述

好了,节点就介绍到这里,直接来看看效果如何。

听雨这里的初始提示词:An Asian girl sitting on a chair,就是一个坐在椅子上的亚洲女孩

以下是 Omost 生成的提示词,听雨这里直接翻译成中文了。

{“rect”:[0,90,90],“prefix”:[“一个坐在椅子上的亚洲女孩。”],“后缀”:[一个20岁左右的亚洲女孩,黑色长发,表情平静,坐在一把木椅上。质感和暖色。”,“灯光柔和,营造出一种平和宁静的氛围。”,”整体图像有一种平静和沉思的感觉,注重简单和宁静。”,“亚洲女孩,坐着,椅子,木椅,黑色长发,平静的表情,白色上衣,浅蓝色裙子,极简主义房间,温暖的灯光,放松,体贴,天然的木饰面,舒适,诱人,柔软的纹理,温暖的颜色,柔和的灯光,平和,宁静,沉思,简单,宁静。”温暖、舒适的面料。”,“这些纹理增加了图像的诱人氛围,增强了整体的舒适感和宁静感。”,”柔软的纹理经过精心选择,与房间的极简主义设计相得益彰。“柔软的纹理,毛绒垫子,温暖的面料,舒适、诱人、舒适、宁静,极简主义设计,经过精心选择。”,“精心挑选的纹理与房间的极简主义设计相得益彰。”,“柔软的纹理是高质量的,细节清晰,营造出一种舒适、诱人的氛围。”]},{“颜色”:[2550210],“rect”:[0,50,50],“前缀”:[“一个坐在椅子上的亚洲女孩”,“温暖的灯光。”],“后缀”:[房间里温暖的灯光柔和柔和,营造出宁静的氛围。“温暖的灯光,柔和的光线,柔和的灯光,平静的,宁静的,微妙的光源,极简主义的设计,温暖的颜色,舒适的,诱人的。”,“温暖的照明创造了一种宁静的氛围。”,”灯光是微妙的,与房间的极简主义设计无缝融合。“,”温暖的照明是高质量的,具有清晰的细节和舒适的,迷人的氛围。“]},{“颜色”:[2550250210],“矩形”:[35,75,45,90],“前缀”:[“一个坐在椅子上的亚洲女孩。”,“木椅。”],“后缀”:[“木椅简单坚固,采用天然木饰面。”,”线条清晰,功能性设计,与房间的极简主义主题相匹配。“,”这把椅子为女孩提供了一个舒适的座位,增加了图像的整体平静和沉思感。“,木椅,简单设计,坚固,天然木饰面,线条干净,功能设计,极简主义主题,舒适座位,平静,沉思。”,房间的主题。”,“木椅质量上乘,细节清晰,木质饰面自然。”]},{“颜色”:[250250210],“矩形”:[5,65,0,35],“前缀”:[“一个坐在椅子上的亚洲女孩。”,《极简主义房间背景》。],“后缀”:[图像的背景是一个极简主义房间,其特点是柔和温暖的灯光和简洁干净的线条。”,“房间有一种舒适而诱人的氛围,柔软的纹理和温暖的颜色。”,“极简主义设计强调简单和宁静,创造一种平静和宁静的氛围。”,”,“简约主义房间,背景,柔和的照明,温暖的照明,简单的设计,干净的线条,舒适,诱人,柔软的质地,温暖的颜色,简单,宁静,平静,宁静。”,《房间有一个舒适和诱人的气氛,柔软的质感和温暖的色彩。》,“极简设计强调简单和宁静,营造一种宁静和宁静的环境。”,rect”:[15,75,15,75],“前缀”:[“一个坐在椅子上的亚洲女孩,“女孩看起来很放松,很有思想,也许迷失在自己的思想中。”,“她坐的木椅简单而结实,有一种天然的木质饰面。”,亚洲女孩,坐着,椅子,木椅,黑色长发,平静的表情,白色上衣,浅蓝色裙子,放松,有思想,天然的木质装饰。”,女孩看起来很轻松,很有想法,营造出一种平静和宁静的氛围。”,图像注重简单和宁静,有一个平静和沉思的感觉。“图像质量高,细节清晰,气氛温暖,诱人。”

Omost 把我们的提示词进行了超级详细的扩写,尤其是细节满满,包括不同区域的颜色,以及整个画面的布局,和画面中的每个物体的刻画。

不过这里平均和覆盖的区别好像也没有那么明显,这里听雨使用的是相同的种子数生成的图片,反正大家都试试吧!

在这里插入图片描述

再来个星空深处的宇宙飞船。

在这里插入图片描述

这个图应该单独拿出来看看,就拿一张吧,这画面相当有视觉冲击有么有!

在这里插入图片描述

不过如果每次都重新让 Omost 重新生成提示词的话,出图还是有些慢的,听雨的配置大概需要一分多钟才能完成整个工作流。

不过我们遇到好的提示词可以将 Omost LLM Chat 节点中的随机种子数固定,那样就可以不需要再次请求大模型了,可以直接走生图流程。

端午节快到了,给小伙伴们放个烟花庆祝一下!

在这里插入图片描述

资料软件免费放送

次日同一发放请耐心等待

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

需要的可以扫描下方CSDN官方认证二维码免费领取【保证100%免费】

在这里插入图片描述

**一、AIGC所有方向的学习路线**

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!
在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
在这里插入图片描述
在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述
这份完整版的学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

在这里插入图片描述

  • 4
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值