【AI辅助设计】电商设计师看看?AI+Blender 打造真实场景渲染图

本文的重点,是介绍由AI生成背景图,然后根据背景生成HDR,再放到Blender中进行渲染的整个过程。这个工作流的好处是:电商渲染图不需要苦苦地去找场景模型,同时又避免了,纯AI换背景,那种不可控和产品会变化的弱点。

这里用到几个AI的技术要点:

  1. 「Midjourney生成电商背景图」 。这块基本没有什么技巧,只需要提示语即可。

  2. 「单图生成HDR技术」

  3. 「Blender渲染合成」 。属于3D软件技巧,网上很多教程哈~

看看效果

先show一下效果,由于本人不是专业的电商设计师,所以,大家看看大致的效果,主要看融合后的感觉,背景是一张静态的图片,效果图稍微调了一下色调。

hdr1.png

hdr1.png

hdr car.png

下面的瓶子有点脏了,发现透明材质不会那么好表现~🥱,毕竟不是实体3D。

hdr3.png

制作过程

正如上面所属,我们需要用到3个工具,分别是Midjourney、DiffusionLight和Blender

AI生成背景部分

我们希望生成一个山野森林里面的一个石台,使用mj的V6模型,可以真实还原出来。提示语如下:

**stone podium on forest background, green color palette, mockup design, digital art, 3d render, ultra realistic, product photography, high resolution, high detail, high quality, sharp focus, hyperrealistic, no blur, bokeh effect, cinematic mood, dark colors, blurred background, fantasy landscape, blue sky, green trees, foggy weather, dramatic light, contrast, shadow and backlight, octane rendering, ray tracing, epic, cinematic, volumetric lighting, HDR --v 6.0 --style raw**  



  * 1
  * 2

选择U3进行放大,即可得到一张1024x1024的图。

DiffusionLight处理

因为我们为了合成的真实,所以HDR光照需要跟背景图保持一致,我们使用开源的DiffusionLight技术进行生成。关于这个技术我之前有介绍过,这里简单说说安装的过程。

推荐大家使用wsl安装,这样会顺畅很多,也不会影响Windows的环境。至于如何安装wsl2,看微软官方的教程即可。同时要安装nvidia的驱动和cuda
tookit,这些自行搜索互联网或者问GPT即可。我们打开wsl的命令行工具。

拉取代码
git clone https://github.com/kijai/ComfyUI-DiffusionLight  



  * 1
  * 2

拉取完成后,CD到ComfyUI-DiffusionLight目录。根据官方提供的方法,逐个输入:

conda env create -f environment.yml  
conda activate diffusionlight  
pip install -r requirements.txt  



  * 1
  * 2
  * 3
  * 4

这里大家也需要安装conda,我用的是miniconda。安装依赖这里,我遇到个坑,就是OpenEXR安装不上,所以我打开requirements.txt,手动把版本号改为:OpenEXR>=1.3.9,就可以安装了。

运行程序

在项目根目录新建一个inputoutput文件夹。

把ComfyUI生成的图,放进input文件夹中。然后依次运行:

python inpaint.py --dataset input --output_dir output  
python ball2envmap.py --ball_dir output/square --envmap_dir output/envmap  
python exposure2hdr.py --input_dir output/envmap --output_dir output/hdr  



  * 1
  * 2
  * 3
  * 4

注意,运行第一行代码时间比较长,4090大约运行了10分钟。最终你可以在,output/hdr 文件夹中,找到最终的输出图。

输出效果

会输出一个HDR球和HDR文件。

bg_ev-00.png

看得出来,灯光的大致关系是没问题的,虽然有瑕疵,材质和环境的理解都到位,作为光源合成,问题不大。另外一张大雪天的路HDR,效果稍微好点,不过也好像变成了广场😂,但作为光源问题不大~。

road_ev-00.png

Blender合成

给摄像机添加背景

导入模型后,我们新建一个摄像机,在这里添加mj生成的背景。

切换到合成模块,按照我的节点,进行链接,这样,渲染的时候才可以把背景图渲染出来。

制作阴影

新建一个平面,随便给个材质,然后在模型属性那里,打开阴影捕捉。

在渲染属性那里,勾选透明。

在切换到cycle渲染器,可以预览看看效果。

可以看到产品和背景已经有了初步的融合,但是因为光照不是由背景图产生的,所以显得很假。

HDR设置

进入HDR节点编辑,把DiffusionLight生成的HDR添加进来,调整一下对比度、亮度、亮度,还有角度。

细化反射

事实上,底部的阴影已经不错了,但是在物理世界中,底部需要反射地面的元素,所以这里还有一步,就需要把接收阴影的平面,加上背景图的元素,我这里制作粗糙点,直接往上面贴了个背景图,同时缩放对好位置。

换个场景可能对比明显点。

以下是没加贴图的。

加了贴图后。

方案的缺点

缺点还是有的,毕竟是模拟和逼近的做法,效果肯定比不上扎扎实实建模搭场景的,如果作为一个快速出图的工作流,可以尝试尝试。另外,生成的HDR分辨率不高,如果需要制作线下广告图,或者更高精度的主图,应该不能胜任~🥱。

做个调查

最后做个调查,最近我们尝试将这类似的技术产品化,希望结合传统工具和AI,赋能给设计师们,不知道各位设计师是否有兴趣尝试?

资料软件免费放送

次日同一发放请耐心等待

针对各位AIGC初学者,这里列举了一条完整的学习计划,感兴趣的可以阅读看看,希望对你的学习之路有所帮助,废话不多说,进入正题:

目标应该是这样的:

第一阶段(30天):AI-GPT从入门到深度应用

该阶段首先通过介绍AI-GPT从入门到深度应用目录结构让大家对GPT有一个简单的认识,同时知道为什么要学习GPT使用方法。然后我们会正式学习GPT深度玩法应用场景。

-----------

  • GPT的定义与概述
  • GPT与其他AI对比区别
  • GPT超强记忆力体验
  • 万能GPT如何帮你解决一切问题?
  • GPT表达方式优化
  • GPT多类复杂应用场景解读
  • 3步刨根问底获取终极方案
  • 4步提高技巧-GPT高情商沟通
  • GPT深度玩法应用场景
  • GPT高级角色扮演-教学老师
  • GPT高级角色扮演-育儿专家
  • GPT高级角色扮演-职业顾问
  • GPT高级角色扮演-专业私人健身教练
  • GPT高级角色扮演-心理健康顾问
  • GPT高级角色扮演-程序UX/UI界面开发顾问
  • GPT高级角色扮演-产品经理
  • GPT高级技巧-游戏IP角色扮演
  • GPT高级技巧-文本冒险游戏引导
  • GPT实操练习-销售行业
  • GPT实操练习-菜谱推荐
  • GPT实操练习-美容护肤
  • GPT实操练习-知识问答
  • GPT实操练习-语言学习
  • GPT实操练习-科学减脂
  • GPT实操练习-情感咨询
  • GPT实操练习-私人医生
  • GPT实操练习-语言翻译
  • GPT实操练习-作业辅导
  • GPT实操练习-聊天陪伴
  • GPT实操练习-育儿建议
  • GPT实操练习-资产配置
  • GPT实操练习-教学课程编排
  • GPT实操练习-活动策划
  • GPT实操练习-法律顾问
  • GPT实操练习-旅游指南
  • GPT实操练习-编辑剧本
  • GPT实操练习-面试招聘
  • GPT实操练习-宠物护理和训练
  • GPT实操练习-吸睛爆款标题生成
  • GPT实操练习-自媒体爆款软件拆解
  • GPT实操练习-自媒体文章创作
  • GPT实操练习-高效写作推广方案
  • GPT实操练习-星座分析
  • GPT实操练习-原创音乐创作
  • GPT实操练习-起名/解梦/写诗/写情书/写小说
  • GPT提升工作效率-Word关键字词提取
  • GPT提升工作效率-Word翻译实现
  • GPT提升工作效率-Word自动填写、排版
  • GPT提升工作效率-Word自动纠错、建议
  • GPT提升工作效率-Word批量生产优质文章
  • GPT提升工作效率-Excel自动化实现数据计算、分析
  • GPT提升工作效率-Excel快速生成、拆分及合并实战
  • GPT提升工作效率-Excel生成复杂任务实战
  • GPT提升工作效率-Excel用Chat Excel让效率起飞
  • GPT提升工作效率–PPT文档内容读取实现
  • GPT提升工作效率–PPT快速批量调整PPT文档
  • GPT提升工作效率-文件批量创建、复制、移动等高效操作
  • GPT提升工作效率-文件遍历、搜索等高效操作
  • GPT提升工作效率-邮件自动发送
  • GPT提升工作效率-邮件自动回复
  • GPT接入QQ与QQ群实战
  • GPT接入微信与微信群实战
  • GPT接入QQ与VX多用户访问实战
  • GPT接入工具与脚本部署实战

第二阶段(30天):AI-绘画进阶实战

该阶段我们正式进入AI-绘画进阶实战学习,首先通过了解AI绘画定义与概述 ,AI绘画的应用领域 ,PAI绘画与传统绘画的区别 ,AI绘画的工具分类介绍的基本概念,以及AI绘画工具Midjourney、Stable Diffusion的使用方法,还有AI绘画插件和模板的使用为我们接下来的实战设计学习做铺垫。

  • -----------
    AI绘画定义与概述
  • AI绘画的应用领域
  • AI绘画与传统绘画的区别
  • AI绘画的工具分类介绍
  • AI绘画工具-Midjourney
  • AI绘画工具-百度文心一格
  • AI绘画工具-SDWebUI
  • AI绘画工具-Vega AI
  • AI绘画工具-微信中的AI绘画小程序
  • Midjourney学习-Discord账号的注册
  • Midjourney Bot界面讲解
  • Midjourney提示词入门
  • Midjourney高级提示词
  • Midjourney版本参数学解读
  • Midjourney功能参数
  • Midjourney上采样参数
  • AI绘画组合应用1-Midjourney + GPT
  • AI绘画组合应用2-Stable Diffusion + GPT
  • AI绘画组合应用3-AI绘画+ GPT +小红书
  • AI绘画组合应用4-AI绘画+ GPT +抖音
  • AI绘画组合应用5-AI绘画+ GPT +公众号
  • AI绘画组合应用6-AI绘画+ GPT + AI视频
  • AI绘画组合应用7-AI绘画+ GPT + 小说人物/场景
  • AI绘画设计-Logo设计
  • AI绘画设计-套用万能公式
  • AI绘画设计-引用艺术风格
  • AI绘画设计-GPT加速设计方案落地
  • AI绘画设计-Vega AI渲染线稿生成设计
  • AI绘画设计-摄影
  • AI绘画设计-头像设计
  • AI绘画设计-海报设计
  • AI绘画设计-模特换装
  • AI绘画设计-家具设计
  • AI绘画设计-潘顿椅设计
  • AI绘画设计-沙发设计
  • AI绘画设计-电视柜设计
  • AI绘画设计-包装设计的提示词构思

第三阶段(30天):AI-视频高段位

恭喜你,如果学到这里,你基本可以找到一份AIGC副业相关的工作,比如电商运营、原画设计、美工、安全分析等岗位;如果新媒体运营学的好,还可以从各大自媒体平台收获平台兼职收益。

到此为止,大概2个月的时间。你已经成为了一名“AI小子”。那么你还想往下探索吗?

  • -----------
    AI视频定义与概述
  • AI视频制作-方案与创新
  • AI视频制作-各种工具实操
  • AI视频制作-美学风格(油画/插画/日漫/水墨)
  • AI视频制作-形象设定(人物形象服装/造型/表情)
  • AI视频画面特效处理
  • AI视频画面拼接
  • AI视频画面配音
  • AI视频画面包装
  • AI视频锁定人物逐一精修
  • 多种表情动作/情节
  • 动态模型转换-视频内部元素关键帧
  • 动态模型转换-图像整体运动
  • 动态模型转换-虚拟人
  • 动态模型转换-表面特效
  • AI自媒体视频-深问GPT,获取方案
  • AI自媒体视频-风格设置(诗歌/文言文等)
  • AI自媒体视频-各行业创意视频设计思路
  • AI视频风格转换
  • AI视频字数压缩
  • AI视频同类型衍生
  • AI视频Pormpt公式

第四阶段(20天):AI-虚拟数字人课程

  • -----------
    AI数字人工具简介
  • AI工作台界面功能展示及介绍
  • AI数字人任务确定
  • AI数字人素材准备
  • AI知识、语料的投喂
  • AI模型训练
  • AI训练成果展示及改进
  • AI数字人直播系统工具使用
  • AI人物在各平台直播
  • AI数字人在OBS平台直播

第五阶段(45天以上):AIGC-多渠道变现课程

该阶段是项目演练阶段,大家通过使用之前学习过的AIGC基础知识,项目中分别应用到了新媒体、电子商务等岗位能帮助大家在主流的新媒体和电商平台引流和带货变现。

-----------

  • AI-小红书引流变现
  • AI-公众号引流变现
  • AI-知乎引流变现
  • AI-抖音引流/带货变现
  • AI-写作变现
  • AI-B站引流变现
  • AI-快手引流变现
  • AI-百家号引流变现
  • AI-制作素材模板出售变现
  • AI-周边定制变现
  • AI-手机壳图案定制变现
  • AI-周边产品定制变现
  • AI-服装图案定制变现
  • AI-个性头像定制变现
  • AI-起号与知识付费变现
  • AI-实现淘宝销售变现

学习是一个过程,只要学习就会有挑战。天道酬勤,你越努力,就会成为越优秀的自己。

如果你能在15天内完成所有的任务,那你堪称天才。然而,如果你能完成 60-70% 的内容,你就已经开始具备成为一名AIGC的正确特征了。

这份完整版的AIGC资料我已经打包好,需要的点击下方二维码,即可前往免费领取!

在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值