针对基于双向深度图像绘制技术(Double-sided Depth-Image Based Rendering,Double-sided DIBR)中产生的空洞、重采样、重叠问题,为提高虚拟图像的合成质量,提出一种改进的正反向映射技术。该技术主要有四点贡献。(1)提出一种深度差值...针对基于双向深度图像绘制技术(Double-sided Depth-Image Based Rendering,Double-sided DIBR)中产生的空洞、重采样、重叠问题,为提高虚拟图像的合成质量,提出一种改进的正反向映射技术。该技术主要有四点贡献。(1)提出一种深度差值估计法。(2)在3D-warping过程中使用改进的基于Z-buffer的OPFD算法,有效解决重采样和重叠问题。(3)对深度虚拟图像运用改进的基于背景空洞填补算法消除空洞。(4)改进反向映射过程,通过判断投影后的图像和辅助彩色参考图像被遮挡信息背景的一致性,选择不同的空洞填补算法填补彩色虚拟图像中的空洞,从而达到更好的填补效果。实验结果表明,改进技术在降低算法复杂度的同时,主观图像质量与客观峰值信噪比(Peak Signal to Noise Ratio,PSNR)以及结构相似(Structural SIMilarity,SSIM)都有所提高。展开更多
针对基于深度图像绘制技术(depth-image based rendering,DIBR)中产生的空洞问题,为提高虚拟视点质量,提出一种基于深度图像绘制技术的Criminisi改进算法。对优先级进行改进,加入指数形式的置信度项和新的数据项,加强对细节部分的填补;...针对基于深度图像绘制技术(depth-image based rendering,DIBR)中产生的空洞问题,为提高虚拟视点质量,提出一种基于深度图像绘制技术的Criminisi改进算法。对优先级进行改进,加入指数形式的置信度项和新的数据项,加强对细节部分的填补;在搜索最佳匹配块时,采用新的颜色匹配因子,添加梯度因子,结合深度因子,对映射后的纹理图和相对应的深度图进行搜索匹配。实验结果表明,相较传统空洞填补算法,改进算法在主观图像质量与客观峰值信噪比(peak signal to noise ratio,PSNR)方面有所提高。展开更多
平面相机阵列四参考视点的深度图像绘制(Depth Image Based Rendering,DIBR)方案允许用户全方位身临其境地体验场景,可有效避免虚拟视点图像边界空洞,然而该方案引入了较为显著的伪影、背景渗透等失真.为此,提出一种深度和结构相似性(St...平面相机阵列四参考视点的深度图像绘制(Depth Image Based Rendering,DIBR)方案允许用户全方位身临其境地体验场景,可有效避免虚拟视点图像边界空洞,然而该方案引入了较为显著的伪影、背景渗透等失真.为此,提出一种深度和结构相似性(Structural Similarity, SSIM)引导的四参考视点融合算法.首先,深入分析了针对平面相机阵列的四参考视点DIBR方案中失真产生的原因;然后,利用参考视点与虚拟视点间的相对位置关系进行视野错误排除,并根据恰可察觉失真模型提取融合图像的失真掩膜;最后,利用失真区域各视点的深度信息和SSIM进行自适应视点融合,进而绘制出高质量的虚拟视点图像.实验结果表明,本文算法绘制的虚拟视点图像比标准方案在SSIM和沉浸式视频峰值信噪比方面分别提升了0.001 8和1.46 d B,比文献方法在主观视觉感知方面更接近于真实图像.展开更多
文摘针对基于双向深度图像绘制技术(Double-sided Depth-Image Based Rendering,Double-sided DIBR)中产生的空洞、重采样、重叠问题,为提高虚拟图像的合成质量,提出一种改进的正反向映射技术。该技术主要有四点贡献。(1)提出一种深度差值估计法。(2)在3D-warping过程中使用改进的基于Z-buffer的OPFD算法,有效解决重采样和重叠问题。(3)对深度虚拟图像运用改进的基于背景空洞填补算法消除空洞。(4)改进反向映射过程,通过判断投影后的图像和辅助彩色参考图像被遮挡信息背景的一致性,选择不同的空洞填补算法填补彩色虚拟图像中的空洞,从而达到更好的填补效果。实验结果表明,改进技术在降低算法复杂度的同时,主观图像质量与客观峰值信噪比(Peak Signal to Noise Ratio,PSNR)以及结构相似(Structural SIMilarity,SSIM)都有所提高。
文摘针对基于深度图像绘制技术(depth-image based rendering,DIBR)中产生的空洞问题,为提高虚拟视点质量,提出一种基于深度图像绘制技术的Criminisi改进算法。对优先级进行改进,加入指数形式的置信度项和新的数据项,加强对细节部分的填补;在搜索最佳匹配块时,采用新的颜色匹配因子,添加梯度因子,结合深度因子,对映射后的纹理图和相对应的深度图进行搜索匹配。实验结果表明,相较传统空洞填补算法,改进算法在主观图像质量与客观峰值信噪比(peak signal to noise ratio,PSNR)方面有所提高。
文摘平面相机阵列四参考视点的深度图像绘制(Depth Image Based Rendering,DIBR)方案允许用户全方位身临其境地体验场景,可有效避免虚拟视点图像边界空洞,然而该方案引入了较为显著的伪影、背景渗透等失真.为此,提出一种深度和结构相似性(Structural Similarity, SSIM)引导的四参考视点融合算法.首先,深入分析了针对平面相机阵列的四参考视点DIBR方案中失真产生的原因;然后,利用参考视点与虚拟视点间的相对位置关系进行视野错误排除,并根据恰可察觉失真模型提取融合图像的失真掩膜;最后,利用失真区域各视点的深度信息和SSIM进行自适应视点融合,进而绘制出高质量的虚拟视点图像.实验结果表明,本文算法绘制的虚拟视点图像比标准方案在SSIM和沉浸式视频峰值信噪比方面分别提升了0.001 8和1.46 d B,比文献方法在主观视觉感知方面更接近于真实图像.
文摘提出了一种基于Kinect的实时深度提取算法和单纹理+深度的多视绘制方法。在采集端,使用Kinect提取场景纹理和深度,并针对Kinect输出深度图的空洞提出一种快速修复算法。在显示端,针对单纹理+深度的基于深度图像的绘制(DIBR,depth image based rendering)绘制产生的大空洞,采用一种基于背景估计和前景分割的绘制方法。实验结果表明,本文方法可实时提取质量良好的深度图,并有效修复了DIBR绘制过程中产生的大空洞,得到质量较好的多路虚拟视点图像。以所提出的深度获取和绘制算法为核心,实现了一种基于深度的立体视频系统,最终的虚拟视点交织立体显示的立体效果良好,进一步验证了本文算法的有效性。本文系统可用于实景的多视点立体视频录制与播放。
