融合视觉特性的基于深度图像自由视点绘制技术研究

项目名称： 融合视觉特性的基于深度图像自由视点绘制技术研究

项目编号： No.61202151

项目类型： 青年科学基金项目

立项/批准年度： 2013

项目学科： 计算机科学学科

项目作者： 李莉

作者单位： 山东财经大学

项目金额： 23万元

中文摘要： 本项目以自由视点视频在3DTV/FTV中的应用为基本背景，以提高自由视点绘制质量为根本目标，探索融合视觉特性的DIBR关键算法，把客体和主体视为一个整体，使之基本满足在自由视点视频系统中理论和应用的需要。从建立人眼视觉关注模型入手，设计基于图像分割的深度估计算法，提高关注区域视差精度，使深度估计结果更符合人主观意识；通过建立人眼视觉感知深度特征模型，提出一种进行深度增强的自适应滤波方法，利用多尺度理论在多尺度层上处理，满足视点间和时间一致性约束条件，从而更适应人眼视觉特性；把视觉感知深度特征模型引入自由视点绘制算法中，设计3D变换和多视点自适应合并方法，提出基于纹理合成的图像修复算法实现空洞的有效填补，达到提高视点绘制主观效果的目的。本项目尝试将人的主观实验和多种图像处理技术相结合的方法，力争从突出主观视觉特性的角度设计一系列稳定、有效、实用的新技术，为自由视点视频的实用化起到推动作用。

中文关键词： 人眼视觉；深度估计；深度增强；自由视点绘制；

英文摘要： The project researches on the key algorithms in DIBR (depth image based rendering) combined with visual characteristics and takes the object and subject as a whole to satisfy requirement of theory and utilization in free view video systems. The usage of free view video in 3DTV/FTV is its basic background and the quality improvement of the free view rendering is its basic goal.Starting with the establishment of human vision attention model,the segmentation-based depth estimation alogrithm is designed to improve the disparity accuracy in vision attention region, and the depth values estimated are more suitalbe to human subjective consciousness. Based on the model of human vision perception on depth features, the adaptive filter method for depth enhancement is presented , which is processed in multi-scale levels using the multi-scale theroy, at the same time interview and time frames coherences are enforced, which makes the optimized results more suitbale to the human visual characteristics. By introducing the model of human vision perception on depth features into free view rendering algorithm, the project designs the 3D warping and adaptive multi-view blending method and the texture synthesis based image inpainting method to fill in the void regions effectively, which realizes the goal of improvement the subjecti

英文关键词： Human vision；depth estimation；depth enhancement；free view rendering；