本文提出了第一种实时全身捕捉的方法,该方法通过单一颜色图像的动态3D人脸模型来估计身体和手的形状和运动。我们的方法使用了一种新的神经网络结构,利用身体和手之间的相关性在高计算效率。与以往的工作不同,我们的方法是在多个数据集上联合训练,分别关注手、身体或面部,不需要同时标注所有部分的数据,这是很难创建足够多的多样性。这种多数据集训练的可能性使其具有优越的泛化能力。与早期的单眼全身方法相比,我们的方法通过估算统计人脸模型的形状、表情、反照率和光照参数来捕捉更具表现力的3D人脸几何形状和颜色。我们的方法在公共基准上实现了具有竞争力的精度,同时显著更快,提供更完整的面部重建。

https://www.zhuanzhi.ai/paper/9de12fe4bffc839e10209a1ad648f1b5

成为VIP会员查看完整内容
19

相关内容

【CVPR2021】多实例主动学习目标检测
专知会员服务
41+阅读 · 2021年4月18日
专知会员服务
42+阅读 · 2021年4月18日
专知会员服务
20+阅读 · 2021年4月2日
【CVPR2021】现实世界域泛化的自适应方法
专知会员服务
53+阅读 · 2021年3月31日
【CVPR2021】动态度量学习
专知会员服务
39+阅读 · 2021年3月30日
专知会员服务
32+阅读 · 2021年3月7日
【CVPR2021】自监督几何感知
专知会员服务
45+阅读 · 2021年3月6日
【AAAI2021】RSPNet: 相对速度感知的无监督视频表示学习
专知会员服务
18+阅读 · 2021年2月12日
专知会员服务
43+阅读 · 2021年1月31日
【泡泡图灵智库】基于有限姿态监督的单目三维重建
泡泡机器人SLAM
5+阅读 · 2019年9月6日
【泡泡图灵智库】实时单目物体-模型感知稀疏SLAM(ICRA)
泡泡机器人SLAM
10+阅读 · 2019年7月12日
【泡泡图灵智库】基于几何一致性网络的摄像机运动估计
Arxiv
0+阅读 · 2021年5月6日
Two Stream 3D Semantic Scene Completion
Arxiv
4+阅读 · 2018年7月16日
VIP会员
相关VIP内容
【CVPR2021】多实例主动学习目标检测
专知会员服务
41+阅读 · 2021年4月18日
专知会员服务
42+阅读 · 2021年4月18日
专知会员服务
20+阅读 · 2021年4月2日
【CVPR2021】现实世界域泛化的自适应方法
专知会员服务
53+阅读 · 2021年3月31日
【CVPR2021】动态度量学习
专知会员服务
39+阅读 · 2021年3月30日
专知会员服务
32+阅读 · 2021年3月7日
【CVPR2021】自监督几何感知
专知会员服务
45+阅读 · 2021年3月6日
【AAAI2021】RSPNet: 相对速度感知的无监督视频表示学习
专知会员服务
18+阅读 · 2021年2月12日
专知会员服务
43+阅读 · 2021年1月31日
微信扫码咨询专知VIP会员