现有基于NeRF的大场景重建方法通常在视觉质量和渲染速度上有限制。虽然最近的3D高斯Splatting在小规模和以物体为中心的场景上表现良好,但将其扩展到大场景上存在挑战,因为受到视频内存有限、优化时间长和明显的外观变化的限制。为了应对这些挑战,我们提出了VastGaussian,这是第一个基于3D高斯Splatting的大场景高质量重建和实时渲染方法。我们提出了一种渐进式分割策略,将大场景分割成多个单元,其中训练相机和点云以空域感知的可见性标准适当分布。这些单元在并行优化后合并成一个完整的场景。我们还在优化过程中引入了解耦的外观建模,以减少渲染图像中的外观变化。我们的方法超越了现有的基于NeRF的方法,并在多个大场景数据集上达到了最先进的结果,实现了快速优化和高保真的实时渲染。项目页面:https://vastgaussian.github.io。

https://arxiv.org/pdf/2402.17427.pdf

成为VIP会员查看完整内容
22

相关内容

【AAAI2024】KAM-CoT: 知识增强的多模态思维链推理
专知会员服务
35+阅读 · 1月24日
【NeurIPS2023】多样化的时空感知用于视频域泛化
专知会员服务
19+阅读 · 2023年10月30日
【CVPR2023】DynamicDet:目标检测的统一动态架构
专知会员服务
25+阅读 · 2023年4月15日
【AAAI2023】用于复杂场景图像合成的特征金字塔扩散模型
【NeurIPS2022】SparCL:边缘稀疏持续学习
专知会员服务
23+阅读 · 2022年9月22日
专知会员服务
10+阅读 · 2021年2月4日
【Tutorial】计算机视觉中的Transformer,98页ppt
专知
16+阅读 · 2021年10月25日
【ICML2020】对比多视角表示学习
专知
18+阅读 · 2020年6月28日
【NeurIPS2019】图变换网络:Graph Transformer Network
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
29+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
Arxiv
131+阅读 · 2023年4月20日
A Survey of Large Language Models
Arxiv
325+阅读 · 2023年3月31日
Arxiv
53+阅读 · 2023年3月26日
Arxiv
111+阅读 · 2023年3月24日
Arxiv
15+阅读 · 2023年3月17日
VIP会员
相关VIP内容
【AAAI2024】KAM-CoT: 知识增强的多模态思维链推理
专知会员服务
35+阅读 · 1月24日
【NeurIPS2023】多样化的时空感知用于视频域泛化
专知会员服务
19+阅读 · 2023年10月30日
【CVPR2023】DynamicDet:目标检测的统一动态架构
专知会员服务
25+阅读 · 2023年4月15日
【AAAI2023】用于复杂场景图像合成的特征金字塔扩散模型
【NeurIPS2022】SparCL:边缘稀疏持续学习
专知会员服务
23+阅读 · 2022年9月22日
专知会员服务
10+阅读 · 2021年2月4日
相关基金
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
29+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
微信扫码咨询专知VIP会员