基于深度图像绘制技术的正反向映射技术的改进

doi:10.3778/j.issn.1002-8331.1610-0074

计算机工程与应用 ›› 2018, Vol. 54 ›› Issue (5): 186-190.DOI: 10.3778/j.issn.1002-8331.1610-0074

基于深度图像绘制技术的正反向映射技术的改进

李英1，杨秋翔1，雷海卫2，杜博2

1.中北大学软件学院，太原 030051
2.中北大学计算机与控制工程学院，太原 030051

出版日期:2018-03-01 发布日期:2018-03-13

Improved forward and reverse wraping depth image-based rendering

LI Ying1, YANG Qiuxiang1, LEI Haiwei2, DU Bo2

1.School of Software Engineering, North University of China, Taiyuan 030051, China
2.School of Computer and Control Engineering, North University of China, Taiyuan 030051, China

Online:2018-03-01 Published:2018-03-13

摘要/Abstract

摘要： 针对基于双向深度图像绘制技术（Double-sided Depth-Image Based Rendering，Double-sided DIBR）中产生的空洞、重采样、重叠问题，为提高虚拟图像的合成质量，提出一种改进的正反向映射技术。该技术主要有四点贡献。（1）提出一种深度差值估计法。（2）在3D-warping过程中使用改进的基于Z-buffer的OPFD算法，有效解决重采样和重叠问题。（3）对深度虚拟图像运用改进的基于背景空洞填补算法消除空洞。（4）改进反向映射过程，通过判断投影后的图像和辅助彩色参考图像被遮挡信息背景的一致性，选择不同的空洞填补算法填补彩色虚拟图像中的空洞，从而达到更好的填补效果。实验结果表明，改进技术在降低算法复杂度的同时，主观图像质量与客观峰值信噪比（Peak Signal to Noise Ratio，PSNR）以及结构相似（Structural SIMilarity，SSIM）都有所提高。

关键词: 基于深度图像的绘制, 三维图像映射, 双向深度图像绘制技术, 正反映射DIBR, 重采样, 空洞, 虚拟视点合成

Abstract: Aiming at the problem of holes, resampling and overlapping generated in the Double-sided Depth-Image Based Rendering technology, in order to improve the quality of virtual viewpoint, an improved forward and reverse wraping DIBR technology is proposed. The technology has four contributions mainly. A depth difference estimation algorithm is proposed firstly. Secondly, the improved OPFD algorithm based on Z-buffer is used in 3D-warping, and the problem of resampling and overlapping is resolved effectively. The improved background-based holes filling algorithm is used for depth virtual image to eliminate holes thirdly. Forthly the forward and reverse wraping process is improved, through judging the consistency of background of blocked information of projected image and auxiliary color reference image. The different holes filling algorithms are selected to fill the holes in the color virtual image so as to achieve a better holes filling effect. Experimental results indicate that the improved technology significantly reduces the complexity of the algorithm, at the same time, enhancing the quality of picture, PSNR and SSIM compared with traditional FR-DIBR technology.

Key words: depth-image based rendering, 3D-warping, Double-sided Depth-Image Based Rendering（DIBR）, Forward and Reverse warping-Depth-Image Based Rendering（FR-DIBR）, resampling, hole, virtual view synthesis

李英1，杨秋翔1，雷海卫2，杜博2. 基于深度图像绘制技术的正反向映射技术的改进[J]. 计算机工程与应用, 2018, 54(5): 186-190.

LI Ying1, YANG Qiuxiang1, LEI Haiwei2, DU Bo2. Improved forward and reverse wraping depth image-based rendering[J]. Computer Engineering and Applications, 2018, 54(5): 186-190.

[1]	胡扬涛，裴洋，林川，李世成，易玉根. 空洞残差U型网络用于视网膜血管分割[J]. 计算机工程与应用, 2021, 57(7): 185-191.
[2]	张博文，周洋，殷海兵. 面向三维视频的虚拟视点合成技术研究进展[J]. 计算机工程与应用, 2021, 57(2): 12-17.
[3]	董立红，李宇星，符立梅. 融合低阶特征与全局特征的图像语义分割方法[J]. 计算机工程与应用, 2021, 57(17): 210-216.
[4]	顾兆军，吴优，赵春迪，周景贤. 流量的集成学习与重采样均衡分类方法[J]. 计算机工程与应用, 2020, 56(6): 86-91.
[5]	徐玲玲，迟冬祥. 面向不平衡数据集的机器学习分类策略[J]. 计算机工程与应用, 2020, 56(24): 12-27.
[6]	罗文劼，倪鹏，张涵，田学东. 多阶段双路人体解析网络[J]. 计算机工程与应用, 2020, 56(20): 146-151.
[7]	徐镪，朱洪锦，范洪辉，周红燕，余光辉. 改进的YOLOv3网络在钢板表面缺陷检测研究[J]. 计算机工程与应用, 2020, 56(16): 265-272.
[8]	王晓华，聂腾腾. 改进的布谷鸟算法优化粒子滤波研究[J]. 计算机工程与应用, 2020, 56(12): 60-65.
[9]	韩雨涝. 非并行二分法的覆盖空洞修复算法[J]. 计算机工程与应用, 2020, 56(12): 87-92.
[10]	侯贝贝，刘三阳，普事业. 基于边界混合重采样的非平衡数据分类方法[J]. 计算机工程与应用, 2020, 56(1): 46-52.
[11]	昝孟恩，周航，韩丹，杨刚，许国梁. 粒子滤波目标跟踪算法综述[J]. 计算机工程与应用, 2019, 55(5): 8-17.
[12]	郭秋红1，梁秀霞1，2. 对3D Warping分解的高质量虚拟视点绘制方法[J]. 计算机工程与应用, 2019, 55(3): 184-190.
[13]	曲长波，姜思瑶，吴德阳. 空洞卷积的多尺度语义分割网络[J]. 计算机工程与应用, 2019, 55(24): 91-95.
[14]	董瑶1，2，葛莹莹1，2，郭鸿湧1，3，董永峰1，2，杨琛1，2. 基于深度强化学习的移动机器人路径规划[J]. 计算机工程与应用, 2019, 55(13): 15-19.
[15]	党小超1，2，马如仓1，郝占军1，2. 基于Voronoi的无线传感器网络栅栏覆盖策略[J]. 计算机工程与应用, 2018, 54(2): 91-96.

基于深度图像绘制技术的正反向映射技术的改进

Improved forward and reverse wraping depth image-based rendering

PDF

可视化

摘要/Abstract

引用本文

使用本文

参考文献

相关文章 15

编辑推荐

Metrics