最近,高斯溅射法(Gaussian Splatting)在计算机视觉领域引发了一股新潮流。除了新颖的视图合成,它还被扩展到了多视角重建领域。最新的方法能够在保证快速训练速度的同时,实现完整且详细的表面重建。然而,这些方法仍然需要密集的输入视角,并且在稀疏视角下,输出质量显著下降。我们观察到,高斯原语(Gaussian primitives)往往会过拟合少量的训练视角,导致噪声浮动物(floaters)和不完整的重建表面。 在本文中,我们提出了一种创新的稀疏视角重建框架,利用视角内深度和多视角特征一致性,实现了显著准确的表面重建。具体而言,我们利用单目深度排名信息来监督补丁内深度分布的一致性,并采用平滑损失(smoothness loss)来增强分布的连续性。为了实现更精细的表面重建,我们通过多视角投影特征来优化深度的绝对位置。 在DTU和BlendedMVS数据集上的大量实验表明,我们的方法在速度上相比最先进的技术提升了60倍到200倍,在无需昂贵的预训练的情况下,实现了快速且细粒度的网格重建。

成为VIP会员查看完整内容
3

相关内容

【AAAI2025】用于高保真3D重建的多视图条件扩散模型
专知会员服务
18+阅读 · 2024年12月12日
【KDD2024】Hypformer:在双曲空间中探索高效的双曲变换器
【AAAI2023】用于复杂场景图像合成的特征金字塔扩散模型
专知会员服务
17+阅读 · 2021年9月7日
专知会员服务
45+阅读 · 2021年1月31日
【AAAI2023】用于图对比学习的谱特征增强
专知
18+阅读 · 2022年12月11日
【KDD2020】动态知识图谱的多事件预测
专知
88+阅读 · 2020年8月31日
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Arxiv
160+阅读 · 2023年4月20日
A Survey of Large Language Models
Arxiv
419+阅读 · 2023年3月31日
Arxiv
150+阅读 · 2023年3月24日
Arxiv
21+阅读 · 2023年3月17日
VIP会员
相关基金
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
微信扫码咨询专知VIP会员