❤️ 如果你也关注 AI 的发展现状,且对 AI 应用开发感兴趣,我会每日分享大模型与 AI 领域的开源项目和应用,提供运行实例和实用教程,帮助你快速上手AI技术!
🥦 AI 在线答疑 -> 智能检索历史文章和开源项目 -> 丰富的 AI 工具库 -> 每日更新 -> 尽在微信公众号 -> 搜一搜:蚝油菜花 🥦
🤖 「别让3D建模累秃头!阿里黑科技让照片秒变数字人」
大家好,我是蚝油菜花。你是否也经历过这些三维地狱模式——
- 👉 为做角色模型,拍200张照片还得配万元级动捕设备
- 👉 外包建个人体3D,等两周拿到文件发现纽扣变马赛克
- 👉 想搞AR试衣间,光模型调整就耗掉整个Q3预算…
今天要颠覆三维赛道的 LHM ,正在重写数字人制作规则!这个通义实验室的王炸:
- ✅ 「单图闪电建模」:5秒吃透照片,高斯点云精准雕刻发丝褶皱
- ✅ 可动基因植入:SMPL-X骨架自动绑定,摆pose比真人还灵活
- ✅ 像素级复刻术:保留99.7%服装纹理,连JK制服格纹都不放过
已有游戏公司用它批量生成NPC,直播团队靠它打造24小时虚拟主播——你的3D工作流,是时候开启「光速建模」时代了!
🚀 快速阅读
LHM是阿里巴巴推出的单图生成可动画3D人体模型的开源解决方案。
- 核心功能:支持从单张图像快速重建高保真3D人体模型,并实现实时姿态控制动画
- 技术原理:采用多模态Transformer架构和3D高斯点云表示,结合自监督学习优化模型
LHM 是什么
[外链图片转存中…(img-FThUzv6W-1742915518583)]
LHM(Large Animatable Human Reconstruction Model)是阿里巴巴通义实验室推出的从单张图像重建可动画化3D人体模型的开源项目。基于多模态Transformer架构,该模型能融合3D几何特征和2D图像特征,用注意力机制保留服装几何与纹理细节。
模型采用3D高斯点云(Gaussian Splatting)形式表示重建的3D模型,支持实时渲染和姿态控制动画。从输入单张图像到生成可动画模型仅需几秒钟,显著降低了3D内容创作门槛。
LHM 的主要功能
- 快速重建:在几秒钟内完成从单张图像到3D可动画化模型的转换,无需复杂的后处理
- 高保真细节:精确保留服装纹理、面部细节等关键信息,生成高质量的3D模型
- 实时动画:支持基于姿态控制的实时动画渲染,适用于沉浸式应用(如AR/VR)
- 泛化能力强:在开放环境(in-the-wild images)上表现出色,适应多种场景和姿态
LHM 的技术原理
- 多模态Transformer架构:融合3D几何特征和2D图像特征,有效处理几何和视觉信息
- 3D高斯点云表示:基于3D高斯点云实现实时、高质量的渲染
- 自监督学习:基于大规模视频数据训练,无需依赖稀缺的3D扫描数据
- 实时动画支持:基于SMPL-X骨架参数实现姿态控制动画
如何运行 LHM
环境配置
克隆仓库并创建虚拟环境:
git clone git@github.com:aigc3d/LHM.git
cd LHM
python -m venv lhm_env
lhm_env\Scripts\activate
Windows安装
运行安装脚本:
install_cu121.bat
python ./app.py
模型下载
wget https://virutalbuy-public.oss-cn-hangzhou.aliyuncs.com/share/aigc3d/data/for_lingteng/LHM/LHM-0.5B.tar
tar -xvf LHM-0.5B.tar
本地运行
python ./app.py
资源
- 项目主页:https://lingtengqiu.github.io/LHM/
- GitHub 仓库:https://github.com/aigc3d/LHM
- 在线演示 Demo:https://huggingface.co/spaces/DyrusQZ/LHM
❤️ 如果你也关注 AI 的发展现状,且对 AI 应用开发感兴趣,我会每日分享大模型与 AI 领域的开源项目和应用,提供运行实例和实用教程,帮助你快速上手AI技术!
🥦 AI 在线答疑 -> 智能检索历史文章和开源项目 -> 丰富的 AI 工具库 -> 每日更新 -> 尽在微信公众号 -> 搜一搜:蚝油菜花 🥦