Dynamic extensions of 3D Gaussian Splatting (3DGS) achieve high-quality reconstructions through neural motion fields, but per-Gaussian neural inference makes these models computationally expensive. Building on DeformableGS, we introduce Speedy Deformable 3D Gaussian Splatting (SpeeDe3DGS), which bridges this efficiency-fidelity gap through three complementary modules: Temporal Sensitivity Pruning (TSP) removes low-impact Gaussians via temporally aggregated sensitivity analysis, Temporal Sensitivity Sampling (TSS) perturbs timestamps to suppress floaters and improve temporal coherence, and GroupFlow distills the learned deformation field into shared SE(3) transformations for efficient groupwise motion. On the 50 dynamic scenes in MonoDyGauBench, integrating TSP and TSS into DeformableGS accelerates rendering by 6.78$\times$ on average while maintaining neural-field fidelity and using 10$\times$ fewer primitives. Adding GroupFlow culminates in 13.71$\times$ faster rendering and 2.53$\times$ shorter training, surpassing all baselines in speed while preserving superior image quality.


翻译:三维高斯泼溅(3DGS)的动态扩展方法通过神经运动场实现了高质量重建,但逐高斯神经推理导致这些模型计算成本高昂。基于DeformableGS,我们提出了快速可变形三维高斯泼溅(SpeeDe3DGS),通过三个互补模块弥合效率与精度之间的差距:时序敏感度剪枝(TSP)通过时序聚合的敏感度分析移除低影响高斯元,时序敏感度采样(TSS)通过扰动时间戳抑制伪影并提升时序一致性,而GroupFlow则将学习到的变形场提炼为共享的SE(3)变换以实现高效的群组运动。在MonoDyGauBench的50个动态场景中,将TSP与TSS集成到DeformableGS中,在保持神经场精度的同时,平均渲染速度提升6.78倍且使用的高斯元数量减少10倍。进一步加入GroupFlow后,渲染速度提升至13.71倍,训练时间缩短2.53倍,在保持卓越图像质量的同时,其速度超越所有基线方法。

0
下载
关闭预览

相关内容

论文浅尝 | GEOM-GCN: Geometric Graph Convolutional Networks
开放知识图谱
14+阅读 · 2020年4月8日
【NeurIPS2019】图变换网络:Graph Transformer Network
NAACL 2019 | 一种考虑缓和KL消失的简单VAE训练方法
PaperWeekly
20+阅读 · 2019年4月24日
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
VIP会员
相关基金
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员