We introduce RealX3D, a real-capture benchmark for multi-view visual restoration and 3D reconstruction under diverse physical degradations. RealX3D groups corruptions into four families, including illumination, scattering, occlusion, and blurring, and captures each at multiple severity levels using a unified acquisition protocol that yields pixel-aligned LQ/GT views. Each scene includes high-resolution capture, RAW images, and dense laser scans, from which we derive world-scale meshes and metric depth. Benchmarking a broad range of optimization-based and feed-forward methods shows substantial degradation in reconstruction quality under physical corruptions, underscoring the fragility of current multi-view pipelines in real-world challenging environments.


翻译:我们提出了RealX3D,这是一个用于多种物理退化条件下多视图视觉恢复与三维重建的真实采集基准数据集。RealX3D将退化类型归纳为四大类,包括光照变化、散射效应、遮挡干扰和模糊现象,并通过统一的采集协议在多个严重程度级别上对每类退化进行捕获,从而获得像素对齐的低质量/真实参考视图。每个场景均包含高分辨率采集图像、RAW原始数据以及密集激光扫描数据,并据此生成世界尺度网格与度量深度图。通过对大量基于优化的方法和前馈方法进行基准测试,我们发现物理退化会导致重建质量显著下降,这凸显了当前多视图重建流程在现实世界复杂环境中的脆弱性。

0
下载
关闭预览

相关内容

VILA-U:一个融合视觉理解与生成的统一基础模型
专知会员服务
21+阅读 · 2024年9月9日
【CVPR2024】ViewDiff: 3D一致的图像生成与文本到图像模型
专知会员服务
30+阅读 · 2024年3月10日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
10+阅读 · 2014年12月31日
VIP会员
相关基金
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
10+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员