We present a simple, yet effective, approach for self-supervised 3D human pose estimation. Unlike the prior work, we explore the temporal information next to the multi-view self-supervision. During training, we rely on triangulating 2D body pose estimates of a multiple-view camera system. A temporal convolutional neural network is trained with the generated 3D ground-truth and the geometric multi-view consistency loss, imposing geometrical constraints on the predicted 3D body skeleton. During inference, our model receives a sequence of 2D body pose estimates from a single-view to predict the 3D body pose for each of them. An extensive evaluation shows that our method achieves state-of-the-art performance in the Human3.6M and MPI-INF-3DHP benchmarks. Our code and models are publicly available at \url{https://github.com/vru2020/TM_HPE/}.


翻译:我们为自我监督的 3D 人形估计提出了一个简单、但有效的方法。 与先前的工作不同, 我们探索多视图自我监督的旁边的时间信息。 在培训期间, 我们依靠三角对二D 机体对多视图摄像系统进行估计。 一个时间进化神经网络通过生成的 3D 地面图理和几何多视角一致性损失来培训, 对预测的 3D 人体骨架施加几何限制。 在推断期间, 我们的模型从一个单一的视图中收到一个 2D 机体的序列, 从一个单一的视图中预测3D 机体对每具的构成。 广泛的评估显示, 我们的方法在 Human3. 6M 和 MPI-INF-3DHP 基准中达到了最先进的性能。 我们的代码和模型在\url{https://github. com/ vru2020/TM_HPE/}上公开提供。

0
下载
关闭预览

相关内容

专知会员服务
31+阅读 · 2021年6月12日
专知会员服务
16+阅读 · 2020年12月4日
【Google】监督对比学习,Supervised Contrastive Learning
专知会员服务
73+阅读 · 2020年4月24日
100+篇《自监督学习(Self-Supervised Learning)》论文最新合集
专知会员服务
164+阅读 · 2020年3月18日
Keras François Chollet 《Deep Learning with Python 》, 386页pdf
专知会员服务
151+阅读 · 2019年10月12日
“CVPR 2020 接受论文列表 1470篇论文都在这了
Transferring Knowledge across Learning Processes
CreateAMind
27+阅读 · 2019年5月18日
TCN v2 + 3Dconv 运动信息
CreateAMind
4+阅读 · 2019年1月8日
Unsupervised Learning via Meta-Learning
CreateAMind
42+阅读 · 2019年1月3日
计算机视觉领域顶会CVPR 2018 接受论文列表
Hierarchical Imitation - Reinforcement Learning
CreateAMind
19+阅读 · 2018年5月25日
Arxiv
27+阅读 · 2020年12月24日
VIP会员
相关VIP内容
Top
微信扫码咨询专知VIP会员