Geometric disentanglement, the separation of latent codes for intrinsic (i.e. identity) and extrinsic(i.e. pose) geometry, is a prominent task for generative models of non-Euclidean data such as 3D deformable models. It provides greater interpretability of the latent space, and leads to more control in generation. This work introduces a mesh feature, the conformal factor and normal feature (CFAN),for use in mesh convolutional autoencoders. We further propose CFAN-VAE, a novel architecture that disentangles identity and pose using the CFAN feature. Requiring no label information on the identity or pose during training, CFAN-VAE achieves geometric disentanglement in an unsupervisedway. Our comprehensive experiments, including reconstruction, interpolation, generation, and identity/pose transfer, demonstrate CFAN-VAE achieves state-of-the-art performance on unsupervised geometric disentanglement. We also successfully detect a level of geometric disentanglement in mesh convolutional autoencoders that encode xyz-coordinates directly by registering its latent space to that of CFAN-VAE.
翻译:内部( 身份) 和 外部( 表面) 几何( 外形) 潜在代码的分离、 内在( 身份) 和外部( 外形( 外形) 几何( 外形) 的隐含代码的分离,是诸如 3D 变形模型等非欧洲化数据基因模型的突出任务。 它为潜在空间提供了更大的可解释性, 并导致产生更多的控制。 这项工作引入了一个网状特征、 相容系数和正常特性( CFAN ), 用于混凝土自动转换器。 我们还进一步提议AFARN- VAE, 这是一种利用AFARN 特性分解和成形的新型结构。 在培训期间, AFARN- VAE 不要求提供关于该特性或成形的标签信息, 也不要求在不兼容的道路上进行几何分解。 我们的综合实验, 包括重建、 内插、 生成、 和身份/ 用途转移, 显示AFAE 等综合实验, 在非超异形的地球学解解解中, 我们还测测测得 级分解状态。 我们还成功地探测到 其直调的航天器- 的磁变形变形变形变形结构, 。