Luma AI 神器Genie 3D 模型设计新世代，简单1句话即可创建逼真模型！

已于 2024-07-26 16:54:36 修改
阅读量1k 收藏 8
点赞数 6
文章标签： 人工智能
于 2024-07-24 14:36:16 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_37863729/article/details/140662538
版权

在数位设计的世界中，我们迎来了一场技术革命！ Luma AI 的最新神器Genie 正式登场，这不仅是一个机器人，更是你的3D 设计助手。你曾经想像过，在简单的文字命令下，秒变为3D 设计师的可能性吗？ Genie 不仅实现了这一梦想，更让整个设计领域为之震撼。


ADVERTISEMENT



目前，Genie 以研究预览版本的形式免费提供，这就意味着你可以即刻体验它的强大功能。可用于文本和图像的生成，为各行各业带来了极大的便利，对游戏开发、虚拟制作领域的影响正在逐渐浮现，也意味着设计师和创作者将拥有更多探索和实现创意的可能性。


 


首先，登入Discord，并接受邀请
 


同意使用规则
 

2.点选左侧房间
点选左侧的任何一个聊天室

 


在对话框输入「/」，出现genie，后面输入英文的提示词。
 


Luma AI
支持格式：luma/ply
使用：开启lumaAI插件后直接导入即可
导入后会渲染生成两种不同效果的模型（粒子）：Baked、Dynamic
Baked：根据实拍场景模拟烘焙出的光照效果，不受UE光照影响
Dynamic：受光照影响
在上述两种情况下还会根据导入格式不同再生成两种类型的模型（粒子）Specific to Luma Fields、Specific to Interactive Scenes
Specific to Luma Fields（luma格式才会生成）
蓝图会包含一个自动裁剪版本的中心对象的捕获，并且会渲染出一个合适的天空环境
Specific to Interactive Scenes（导入ply会生成）
不计算运动矢量 以牺牲质量换取性能
导入后会有偏移
调整到下图参数基本处于正向
 


可通过勾选下列四个裁剪方块对模型进行裁剪，裁剪方块的大小和位置可控
 


LMG_5 粒子瓦片的坐标
LMG_6 贴图的像素
NumGaussians 粒子数量 适当提高粒子数量会在一定程度上提高清晰度 粒子数量一定程度后无论如何添加都不会有效果 反而会加大性能消耗


最大值200W 接近或者大于200W 会看不到粒子效果


Splat Scale 渲染的粒子大小比率
0.8 - 1.2有适当效果变化 过大过小 展现效果都会变差


3.输入提示词
我输入了兔娃娃，就会立刻生成毛茸茸的4张兔子图像，滑鼠移动到上方，即可看3D模型。
生成速度很快，不用1秒，机器人就做好3D模型了
 

4.开启3D模型介面
点选下方任意数字，开启3D模型介面，右边有4个圈圈，可以更改模型的材质跟纹理。
 


可以变换成金属材质
 


塑胶材质
 


用滑鼠拖曳可以转动模型。
 

5.可直接下载
右下角可以直接点选下载，档案类型为:3D Object (.glb)
 


输入简单的钢铁人Iron Man，就能完成3D模型
 


而且机器人创作的速度非常快。
 


结语
Genie 的出现让我们看到了3D 设计的全新未来，一个由文字即可创造复杂模型的世界。 3D模型技术具有潜在的创新性和广泛应用，可能会在未来的虚拟制作、游戏开发等领域发挥重要作用。

这技术的进步，将可能会推动相关行业的应用发展。

博客原文：https://www.closeai.cc/

专业人工智能技术社区

CloseAi论坛
关注
AI 3D模型系列之 使用 AI 生成 3D 模型：初学者指南
iCloudEnd的博客
06-28 290
我最近非常喜欢 3D。自从我发现了 Three.js 以来，我就一直在我的 Web 应用中插入 3D 形状和随机对象。这非常简单（特别是如果你使用 React 和 Three Fiber），而且非常有趣！如果您已经熟悉这些库，它们可以让您为网页设计添加更多维度，以及所有交互性、物理和特效。添加一个简单的表单通常只需要几行代码，但结果却令人惊叹。让我们从一个例子开始……如果您熟悉 React，那么这段代码应该非常有意义。如果不熟悉，请将、或等元素视为构成此图片的单独对象。如果您注释掉它们，它们就会消失。
Luma AI技术浅析（一）
m0_75253143的博客
11-26 1261
是一款基于人工智能的3D内容生成平台，旨在通过深度学习技术实现高效、高质量的3D场景、物体和动画的生成。Luma AI 主要利用了等技术，以实现从图像、视频到3D模型的转换和生成。
贝叶斯建模软件GeNIE下载
04-11
无需编程，可视化窗口贝叶斯建模工具，适于用来建模仿真及数据分析。
只需5秒视频就能生成3D模型的AI工具——Luma AI
热门推荐
CCEEHM的博客
10-05 3万+
以往建一个3D场景，需要花费大量的时间和精力。现在有了Luma AI，可以轻松创造出电影级别的3D效果。即使一个小白也能分分钟掌握，基本达成人人零门槛设计3D建模啦！
视频生成3D模型luma AI Dashboard
崎山小鹿的专栏
09-15 757
他可以根据一段视频生成3D环境模型，他能根据视频角度去完善模型，对模型进行AI补全，如果上传的视频角度足够全面，我们将得到一个非常完整和细腻的3D模型。
Genie：开创性的生成型交互环境
人工智能讲师分享前沿技术
08-04 971
人工智能咨询培训老师叶梓 转载标明出处在生成式人工智能（Generative AI）的浪潮中，一种全新的模型——Genie，由Google DeepMind的研究团队提出。Genie是一个从无标签的互联网视频数据中以无监督方式训练出来的生成型交互环境模型。这项研究突破了传统模型对于标注数据的依赖，为创建和探索虚拟世界提供了全新的途径。Genie模型能够在没有具体动作标签或其他特定领域要求的情况下，从视频数据中学习并生成可控的交互式虚拟环境。
GeNIe模型+贝叶斯可视化建模工具使用.zip
10-26
贝叶斯可视化窗口建模工具，适于用来建模仿真及数据分析，文件包里含有已有建模模型，以及GeNIe模型用户使用手册，非常详细！！！
Luma AI：基于AI使用iPhone生成3D模型应用
zxb_1222的博客
09-19 1076
Luma AI支持SBS（Side by Side）格式的3D图像输出，这意味着用户可以用任何支持该格式的VR设备来观看Luma AI生成的3D图像。这样就可以感受到更强烈的立体感和逼真感。AIGC是人工智能领域中的一种创新技术，其基本原理是利用人工智能技术中的“自然语言处理”、“机器学习”、“深度学习”等技术，对大量的语言数据进行深入分析、学习和模拟，从而实现对自然语言的理解和生成。：Luma AI使用了一种基于神经网络的渲染技术，它可以根据照片中的光线、阴影、反射和细节来给3D模型上色和贴图。
Luma AI：基于NeRF，文字、图片、视频都可生成3D模型
qingtingwang的博客
03-28 2624
上周，我们刚刚报道了3D内容方案商Luma AI完成2000万美元A轮融资消息，本周Luma AI继续宣布推出视频转3D场景API：Video-to-3D API。简单来说，现在Luma正式开放了NeRF能力，意味着正在进行商业化探索。正如最近很火爆的GPT等生成式AI那样，NeRF在最近两年同样是一项关注度极高的方案，而以NeRF为核心的Luma AI发展同样迅速。
Luma AI 推出革命性AI视频生成模型 Dream Machine，可以生成流畅的电影级效果，对标Sora并且已经公开测试
2401_85782600的博客
06-20 179
在AI领域，竞争日益激烈。尽管众多用户翘首以盼OpenAI的Sora模型，但其迟迟未能开放使用，使得Luma AI等竞争对手纷纷抓住机会推出自己的创新产品。今日，旧金山初创公司Luma AI就在这种市场环境下打出一手王牌，推出了名为Dream Machine的新一代AI视频生成模型，人人免费可用，引发业界广泛关注。快速、高效且免费的视频生成工具。
genie学术版应用Bayesian网格建模分析
04-28
适合各种Bayesian网格建模分析
可视化贝叶斯网络建模软件GeNIe2.2用户手册
10-10
可视化软件，UI非常友好 省去了Matlab编程的烦恼，极适合新接触BN的用户使用
GeNIe模型用户使用手册（2019版）
03-27
GeNIe是构建图决策理论模型的环境开发工具，可以方便进行多种概率图模型的构建、推理和学习。
Luma Dream Machine AI视频生成模型：根据文本和图像快速制作高质量、逼真的视频
heehelcom的博客
06-13 2470
虽然 OpenAI 的 Sora 和快手的 Kling 等竞争对手的系统已经展示了令人印象深刻的功能，但它们仍然只有少数合作伙伴可以使用。早期的测试人员称赞该系统能够忠实地渲染指定的对象、角色、动作和环境，同时保持流畅的动作和连贯的故事讲述。创建动感十足的镜头：Dream Machine 生成具有逼真流畅的动作、电影摄影和戏剧效果的 5 秒镜头。使死气沉沉变为热闹。通过令人惊叹的镜头移动吸引注意力：Dream Machine 可帮助你尝试与场景的空旷和内容相匹配的一系列流畅、电影和自然的摄像机运动。
GeniE 实用教程（二）几何与网格
Hulunbuir
02-13 2480
SESAM、GeinE；Guiding Geometry、Structure；网格属性、网格划分
10个最强大的AI驱动的3D建模工具【生成式AI】
新缸中之脑
09-05 2393
推荐：用快速搭建可编程3D场景在快速发展的技术世界中，人工智能 (AI) 已经改变了游戏规则，尤其是在 3D 对象生成领域。AI 驱动的 3D 对象生成器彻底改变了我们创建和可视化 3D 模型的方式，使该过程更加高效、准确且可供每个人使用。无论你是游戏开发人员、图形设计师还是只是技术爱好者，这些工具都可以帮助你在三维上将你的想法变为现实。在本博客中，我们将探讨十种最好的 AI 3D 对象生成器，它们以其创新功能和用户友好的界面引领行业。
GeniE 实用教程（一）简介
Hulunbuir
11-10 1万+
SESAM、GeniE；GUI与帮助文档；分析流程与类型；命令行
Python项目--基于计算机视觉的手势识别控制系统
最新发布
exlink2012的专栏
04-23 1744
随着人机交互技术的快速发展，传统的键盘、鼠标等输入设备已经不能满足人们对自然、直观交互的需求。手势识别作为一种非接触式的人机交互方式，具有操作自然、交互直观的特点，在智能家居、游戏控制、虚拟现实等领域有着广泛的应用前景。 本项目旨在开发一个基于计算机视觉的手势识别控制系统，通过摄像头捕获用户的手部动作，实时识别手势类型，并将识别结果转化为相应的控制命令，实现对计算机或其他设备的非接触式控制。
luma部署模型
03-08
### 部署LUMA模型的方法 对于LUMA模型的部署，通常涉及几个关键步骤来确保模型能够有效地运行于目标环境中。虽然具体的细节可能依据不同的应用环境有所变化，但一般流程可以概括如下[^1]： #### 准备工作 确保所有必要的依赖项都已安装并配置好。这包括但不限于Python版本、特定库以及框架的支持。 #### 获取预训练模型文件 下载官方发布的最新版LUMA预训练权重文件，并将其放置在一个易于访问的位置以便后续加载使用。 #### 编写推理脚本 创建一个新的Python脚本来处理输入数据并通过调用`model.predict()`方法来进行预测操作。下面是一个简单的例子： ```python import torch from luma_model import LumaModel # 假设这是定义好的模块名 def load_luma_model(model_path): device = 'cuda' if torch.cuda.is_available() else 'cpu' model = LumaModel().to(device) checkpoint = torch.load(model_path, map_location=device) model.load_state_dict(checkpoint['state_dict']) return model.eval() if __name__ == "__main__": MODEL_PATH = "./models/luma_best.pth" # 加载模型 model = load_luma_model(MODEL_PATH) # 进行推断... ``` #### 设置API服务接口 为了使外部应用程序更容易与LUMA交互，建议设置RESTful API端点作为中介层。Flask或FastAPI都是不错的选择用于快速搭建这样的web服务器。 通过POST请求接收待分析的数据包，在内部执行上述编写的推理逻辑并将结果返回给客户端。 #### 测试验证 最后一步是对整个系统进行全面测试以确认其稳定性和准确性。可以通过发送模拟样本至API地址观察响应情况从而完成这项任务。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值