AI技术 | PIFuHD-由高清图片生成3D人物模型对BIM的启示
AI技术 | PIFuHD-由高清图片生成3D人物模型对BIM的启示
最近在知乎上逛着看到一个非常有意思的AI技术,叫PIFuHD,这个技术可以由一张人物的高清图片,进行一系列的像素处理,生成人物的3D模型结构,很多关于人物的细节都处理得很好,还原度很高,下面是官网的展示:
更有趣的是这个技术在GitHub上开源了,目前star是4.8K,在Google CoLab上也可以在线上传,然后生成自己想要的3D模型。自己本身对这种深度学习涉猎的不是很深,跟着GitHub上的步骤还是没跑起来,就只能用colab上的尝试效果给大家看看。
总共是试验了三张图片,
第一张是标准的人物:
3D模型效果:
第二张选了一个衣服稍微复杂一点的人物:
3D模型效果:
第三张是个人最喜欢的钢铁侠:
3D模型效果:
从使用的角度上,感觉人物识别还是很好的,但是并不是普适性的照片建模(纯外行角度),初步估计是本身训练的样本有关系,让他建钢铁侠的模型是有点难为它了。
如果自己想去试试,有2种方法:
1、可以登录Google colab上尝试,不过要注意会有连接GPU每天由于受到colab本身会有限制,不能太多次数。
2、根据GitHub上git clone下来自己本地跑,但是根据文档说很多依赖要拉下来,而且本身建议是至少8GB的GPU显存来跑PIFuHD模型,而且之前训练的pifuhd的模型也有1.4G的大小,只是想玩玩的就用用网上的colab吧。
感叹现在的AI技术变化真的很快,现在这一个张小小的图片就可以复原一个3D模型,对bim来说 AI+BIM真的有很多想象空间。
1、通过AI的识图,由一张图片来建BIM模型比较复杂的构件;
2、通过AI的识图,由一张图片来复原一些古建筑,不用自己手工建模;
3、通过AI的识图,由一张图片来重现一些现场的场景,可以做VR,也可以用来对比施工现场的进度
…
怎么用colab在油管上也有视频,很多人可能不方便查看,我已经下载好了,需要的可以下面回复“PIFuHD” 索取教程视频。
参考资料:
GitHub地址:
https://github.com/facebookresearch/pifuhd
知乎介绍:
https://zhuanlan.zhihu.com/p/277508872
Colab地址(安全上网方式+gmail账户):
https://colab.research.google.com/drive/1PUZwP6IWOtUyke–6lPZN8hvoe_rmeSn
BIM树洞
做一个静谧的树洞君
用建筑的语言描述IT事物;
用IT的思维解决建筑问题;
共建BIM桥梁,聚合团队。
本学习分享资料不得用于商业用途,仅做学习交流!!如有侵权立即删除!!
-
微信公众号: BIM树洞
-
知乎专栏:BIM树洞
-
气氛组博客:http://www.31bim.com
-
BIM应用及咨询,CAD,Revit, OpenGL,图形开发交流,加Q群1083064224