Generative AI (GenAI) models have revolutionized animation, enabling the synthesis of humans and motion patterns with remarkable visual fidelity. However, generating truly realistic human animation remains a formidable challenge, where even minor inconsistencies can make a subject appear unnatural. This limitation is particularly critical when AI-generated videos are evaluated for behavioral biometrics, where subtle motion cues that define identity are easily lost or distorted. The present study investigates whether state-of-the-art GenAI human animation models can preserve the subtle spatio-temporal details needed for person identification through gait biometrics. Specifically, we evaluate four different GenAI models across two primary evaluation tasks to assess their ability to i) restore gait patterns from reference videos under varying conditions of complexity, and ii) transfer these gait patterns to different visual identities. Our results show that while visual quality is mostly high, biometric fidelity remains low in tasks focusing on identification, suggesting that current GenAI models struggle to disentangle identity from motion. Furthermore, through an identity transfer task, we expose a fundamental flaw in appearance-based gait recognition: when texture is disentangled from motion, identification collapses, proving current GenAI models rely on visual attributes rather than temporal dynamics.


翻译:生成式AI(GenAI)模型已彻底改变动画领域,能够以惊人的视觉保真度合成人体与运动模式。然而,生成真正逼真的人体动画仍是一项艰巨挑战,即使微小的不一致也可能使对象显得不自然。当AI生成视频用于行为生物特征识别时,这一局限性尤为关键,因为定义身份的细微运动线索极易丢失或扭曲。本研究探讨了最先进的GenAI人体动画模型能否保留通过步态生物特征进行身份识别所需的细微时空细节。具体而言,我们评估了四种不同的GenAI模型在两项主要评估任务中的表现,以检验其能力:i)在不同复杂条件下从参考视频中还原步态模式,ii)将这些步态模式迁移至不同的视觉身份。研究结果表明,虽然视觉质量普遍较高,但在侧重身份识别的任务中,生物特征保真度仍然较低,这表明当前GenAI模型难以将身份与运动特征解耦。此外,通过身份迁移任务,我们揭示了基于外观的步态识别存在根本缺陷:当纹理特征与运动特征解耦时,识别性能崩溃,这证明当前GenAI模型依赖视觉属性而非时序动态特征。

0
下载
关闭预览

相关内容

具有动能的生命体。
Python图像处理,366页pdf,Image Operators Image Processing in Python
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
VIP会员
相关基金
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员