In recent years, the demand for 3D content has grown exponentially with the intelligent upgrade of interactive media, extended reality (XR), and Metaverse industries. In order to overcome the limitations of traditional manual modeling approaches, such as labor-intensive workflows and prolonged production cycles, revolutionary advances have been achieved through the convergence of novel 3D representation paradigms and artificial intelligence generative technologies. In this survey, we conduct a systematic review of the cutting-edge achievements in static 3D object and scene generation, as well as establish a comprehensive technical framework through systematic categorization. We start our analysis with mainstream 3D object representations. Subsequently, we delve into the technical pathways of 3D object generation based on four mainstream deep generative models: Variational Autoencoders, Generative Adversarial Networks, Autoregressive Models, and Diffusion Models. Regarding scene generation, we focus on three dominant paradigms: layout-guided generation, lifting based on 2D priors, and rule-driven modeling. Finally, we critically examine persistent challenges in 3D generation and propose potential research directions for future investigation. This survey aims to provide readers with a structured understanding of state-of-the-art 3D generation technologies while inspiring researchers to undertake more exploration in this domain.


翻译:近年来,随着交互媒体、扩展现实(XR)及元宇宙产业的智能化升级,对三维内容的需求呈指数级增长。为克服传统手工建模方法(如劳动密集型工作流程和漫长的生产周期)的局限性,新型三维表示范式与人工智能生成技术的融合已取得革命性进展。本综述系统回顾了静态三维物体与场景生成的前沿成果,并通过系统分类建立了全面的技术框架。我们从主流的三维物体表示方法展开分析。随后,我们深入探讨了基于四种主流深度生成模型的三维物体生成技术路径:变分自编码器、生成对抗网络、自回归模型和扩散模型。关于场景生成,我们聚焦于三种主导范式:布局引导生成、基于二维先验的提升以及规则驱动建模。最后,我们批判性地审视了三维生成中持续存在的挑战,并提出了未来研究的潜在方向。本综述旨在为读者提供对前沿三维生成技术的结构化理解,同时启发研究者在该领域开展更多探索。

0
下载
关闭预览

相关内容

144页ppt《扩散模型》,Google DeepMind Sander Dieleman
专知会员服务
48+阅读 · 11月21日
视频扩散模型综述:基础、实现与应用
专知会员服务
13+阅读 · 4月24日
三维物体与场景生成的最新进展:综述
专知会员服务
17+阅读 · 4月17日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
5+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
VIP会员
相关VIP内容
相关基金
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
5+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
6+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员