Humans in 4D: Reconstructing and Tracking Humans with Transformers

  1. 问题引入
  • 从单张图片重建人体的3d meshes,即human mesh recovery, HMR任务,并且重建的结果作为tracking模型的输入来进行跟踪,在人体重建和monocular video人体追踪任务上都实现了sota;
  • 本文主要是将transformer引入hmr任务中,并构建了一个3d人体重建+跟踪的系统;在这里插入图片描述
  1. methods
  • SMPL:参数化人体模型,在给定pose θ ∈ R 24 × 3 × 3 \theta\in\mathbb{R}^{24\times 3\times3} θR24×3×3和shape β ∈ R 10 \beta\in\mathbb{R}^{10} βR10的情况下,输出人体mesh M ∈ R 3 × N M\in\mathbb{R}^{3\times N} MR3×N,其中 N = 6890 N=6890 N=6890表示顶点个数,人体关节 X ∈ R 3 × k X\in\mathbb{R}^{3\times k} XR3×k是顶点的线性组合,通过公式 X = M W X = MW X=MW来计算,其中 W ∈ R N × k W\in\mathbb{R}^{N\times k} WRN×k是固定的权重,pose包含pose相关参数 θ b ∈ R 23 × 3 × 3 \theta_b\in\mathbb{R}^{23\times 3\times3} θbR23×3×3和orientation θ g ∈ R 3 × 3 \theta_g\in\mathbb{R}^{3\times3} θgR3×3
  • camera:相机焦距和内参固定,每一个相机对应外参 π = ( R , t ) \pi = (R,t) π=(R,t),其中 R ∈ R 3 × 3 , t ∈ R 3 R\in\mathbb{R}^{3\times 3},t\in\mathbb{R}^3 RR3×3,tR3,给定这些的前提之下,SMPL模型的每个点 X X X可以被投影到图像 x x x
  • HMR模型:输入单张图片 I I I,输出pose,shape参数和camera translation θ , β , π \theta,\beta,\pi θ,β,π
  1. 实验
Vivado2023是一款集成开发环境软件,用于设计和验证FPGA(现场可编程门阵列)和可编程逻辑器件。对于使用Vivado2023的用户来说,license是必不可少的。 Vivado2023的license是一种许可证,用于授权用户合法使用该软件。许可证分为多种类型,包括评估许可证、开发许可证和节点许可证等。每种许可证都有不同的使用条件和功能。 评估许可证是免费提供的,让用户可以在一段时间内试用Vivado2023的全部功能。用户可以使用这个许可证来了解软件的性能和特点,对于初学者和小规模项目来说是一个很好的选择。但是,使用评估许可证的用户在使用期限过后需要购买正式的许可证才能继续使用软件。 开发许可证是付费的,可以永久使用Vivado2023的全部功能。这种许可证适用于需要长期使用Vivado2023进行开发的用户,通常是专业的FPGA设计师或工程师。购买开发许可证可以享受Vivado2023的技术支持和更新服务,确保软件始终保持最新的版本和功能。 节点许可证是用于多设备或分布式设计的许可证,可以在多个计算机上安装Vivado2023,并共享使用。节点许可证适用于大规模项目或需要多个处理节点进行设计的用户,可以提高工作效率和资源利用率。 总之,Vivado2023 license是用户在使用Vivado2023时必须考虑的问题。用户可以根据自己的需求选择合适的许可证类型,以便获取最佳的软件使用体验。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值