针对基于深度图像绘制技术(depth-image based rendering,DIBR)中产生的空洞问题,为提高虚拟视点质量,提出一种基于深度图像绘制技术的Criminisi改进算法。对优先级进行改进,加入指数形式的置信度项和新的数据项,加强对细节部分的填补;...针对基于深度图像绘制技术(depth-image based rendering,DIBR)中产生的空洞问题,为提高虚拟视点质量,提出一种基于深度图像绘制技术的Criminisi改进算法。对优先级进行改进,加入指数形式的置信度项和新的数据项,加强对细节部分的填补;在搜索最佳匹配块时,采用新的颜色匹配因子,添加梯度因子,结合深度因子,对映射后的纹理图和相对应的深度图进行搜索匹配。实验结果表明,相较传统空洞填补算法,改进算法在主观图像质量与客观峰值信噪比(peak signal to noise ratio,PSNR)方面有所提高。展开更多
针对基于双向深度图像绘制技术(Double-sided Depth-Image Based Rendering,Double-sided DIBR)中产生的空洞、重采样、重叠问题,为提高虚拟图像的合成质量,提出一种改进的正反向映射技术。该技术主要有四点贡献。(1)提出一种深度差值...针对基于双向深度图像绘制技术(Double-sided Depth-Image Based Rendering,Double-sided DIBR)中产生的空洞、重采样、重叠问题,为提高虚拟图像的合成质量,提出一种改进的正反向映射技术。该技术主要有四点贡献。(1)提出一种深度差值估计法。(2)在3D-warping过程中使用改进的基于Z-buffer的OPFD算法,有效解决重采样和重叠问题。(3)对深度虚拟图像运用改进的基于背景空洞填补算法消除空洞。(4)改进反向映射过程,通过判断投影后的图像和辅助彩色参考图像被遮挡信息背景的一致性,选择不同的空洞填补算法填补彩色虚拟图像中的空洞,从而达到更好的填补效果。实验结果表明,改进技术在降低算法复杂度的同时,主观图像质量与客观峰值信噪比(Peak Signal to Noise Ratio,PSNR)以及结构相似(Structural SIMilarity,SSIM)都有所提高。展开更多
平面相机阵列四参考视点的深度图像绘制(Depth Image Based Rendering,DIBR)方案允许用户全方位身临其境地体验场景,可有效避免虚拟视点图像边界空洞,然而该方案引入了较为显著的伪影、背景渗透等失真.为此,提出一种深度和结构相似性(St...平面相机阵列四参考视点的深度图像绘制(Depth Image Based Rendering,DIBR)方案允许用户全方位身临其境地体验场景,可有效避免虚拟视点图像边界空洞,然而该方案引入了较为显著的伪影、背景渗透等失真.为此,提出一种深度和结构相似性(Structural Similarity, SSIM)引导的四参考视点融合算法.首先,深入分析了针对平面相机阵列的四参考视点DIBR方案中失真产生的原因;然后,利用参考视点与虚拟视点间的相对位置关系进行视野错误排除,并根据恰可察觉失真模型提取融合图像的失真掩膜;最后,利用失真区域各视点的深度信息和SSIM进行自适应视点融合,进而绘制出高质量的虚拟视点图像.实验结果表明,本文算法绘制的虚拟视点图像比标准方案在SSIM和沉浸式视频峰值信噪比方面分别提升了0.001 8和1.46 d B,比文献方法在主观视觉感知方面更接近于真实图像.展开更多
在自由视点视频系统中,如何能在视频终端得到高质量的视频图像已成为基于深度图的绘制(DIBR)技术所研究的主要任务,其中虚拟视点像素插值是该技术中影响绘制质量的一个重要环节。针对虚拟视点绘制标准方案中存在的问题,提出了一种基于...在自由视点视频系统中,如何能在视频终端得到高质量的视频图像已成为基于深度图的绘制(DIBR)技术所研究的主要任务,其中虚拟视点像素插值是该技术中影响绘制质量的一个重要环节。针对虚拟视点绘制标准方案中存在的问题,提出了一种基于空间加权的像素插值算法。它是通过对多个投影像素点的深度值和水平方向绝对距离进行加权操作来实现像素插值的。在插值过程中,该算法考虑了不同区域投影像素点个数对像素插值准确性的影响,从而剔除了部分失真像素点,并且在图像输出前还分别对左、右参考虚拟视点进行了失真检测和矫正。实验结果表明,该算法改善了绘制的主、客观质量,其中,PSNR平均提高0.30 d B,SSIM平均提高0.001 3。因此,该算法可以有效地抑制像素插值过程引入的噪声,提高像素插值的精度。展开更多
目的基于深度图的绘制(DIBR)是一种新型的虚拟视点生成技术,在诸多方面得到了广泛的应用。然而,该技术还不能满足实时性的绘制需求。为了在保证绘制质量不下降的前提下,尽可能地提高绘制速度,提出了一种高效的3D-Warping(3维坐标变换)...目的基于深度图的绘制(DIBR)是一种新型的虚拟视点生成技术,在诸多方面得到了广泛的应用。然而,该技术还不能满足实时性的绘制需求。为了在保证绘制质量不下降的前提下,尽可能地提高绘制速度,提出了一种高效的3D-Warping(3维坐标变换)算法。方法主要在以下3个方面进行了改进:1)引入了深度—视差映射表技术,避免了重复地进行视差求取操作。2)对深度平坦的像素块进行基于块的3D-Warping,减少了映射的次数。对深度非平坦像素块中的像素点采取传统的基于像素点的3D-Warping,保证了映射的准确性。3)针对两种不同的3D-Warping方式,分别提出了相应的插值算法。在水平方向上,改进的像素插值算法对紧邻插值和Splatting(散射)插值算法进行了折中,只在映射像素点与待插值像素点很近的情况下才进行紧邻插值,否则进行Splatting插值;在深度方向上,它对Z-Buffer(深度缓存)技术进行了改进,舍弃了与前景物体太远的映射像素点,而对其他映射像素点按深度值进行加权操作。结果实验结果表明,与标准绘制方案的整像素精度相比,绘制时间平均节省了72.05%;与标准绘制方案的半像素精度相比,PSNR平均提高了0.355 d B,SSIM平均提高了0.001 15。结论改进算法非常适用于水平设置相机系统的DIBR技术中的整像素精度绘制,对包含大量深度平坦区域的视频序列效果明显,不但能够提高绘制的速度,而且可以有效地改善绘制的客观质量。展开更多
文摘针对基于深度图像绘制技术(depth-image based rendering,DIBR)中产生的空洞问题,为提高虚拟视点质量,提出一种基于深度图像绘制技术的Criminisi改进算法。对优先级进行改进,加入指数形式的置信度项和新的数据项,加强对细节部分的填补;在搜索最佳匹配块时,采用新的颜色匹配因子,添加梯度因子,结合深度因子,对映射后的纹理图和相对应的深度图进行搜索匹配。实验结果表明,相较传统空洞填补算法,改进算法在主观图像质量与客观峰值信噪比(peak signal to noise ratio,PSNR)方面有所提高。
文摘针对基于双向深度图像绘制技术(Double-sided Depth-Image Based Rendering,Double-sided DIBR)中产生的空洞、重采样、重叠问题,为提高虚拟图像的合成质量,提出一种改进的正反向映射技术。该技术主要有四点贡献。(1)提出一种深度差值估计法。(2)在3D-warping过程中使用改进的基于Z-buffer的OPFD算法,有效解决重采样和重叠问题。(3)对深度虚拟图像运用改进的基于背景空洞填补算法消除空洞。(4)改进反向映射过程,通过判断投影后的图像和辅助彩色参考图像被遮挡信息背景的一致性,选择不同的空洞填补算法填补彩色虚拟图像中的空洞,从而达到更好的填补效果。实验结果表明,改进技术在降低算法复杂度的同时,主观图像质量与客观峰值信噪比(Peak Signal to Noise Ratio,PSNR)以及结构相似(Structural SIMilarity,SSIM)都有所提高。
文摘平面相机阵列四参考视点的深度图像绘制(Depth Image Based Rendering,DIBR)方案允许用户全方位身临其境地体验场景,可有效避免虚拟视点图像边界空洞,然而该方案引入了较为显著的伪影、背景渗透等失真.为此,提出一种深度和结构相似性(Structural Similarity, SSIM)引导的四参考视点融合算法.首先,深入分析了针对平面相机阵列的四参考视点DIBR方案中失真产生的原因;然后,利用参考视点与虚拟视点间的相对位置关系进行视野错误排除,并根据恰可察觉失真模型提取融合图像的失真掩膜;最后,利用失真区域各视点的深度信息和SSIM进行自适应视点融合,进而绘制出高质量的虚拟视点图像.实验结果表明,本文算法绘制的虚拟视点图像比标准方案在SSIM和沉浸式视频峰值信噪比方面分别提升了0.001 8和1.46 d B,比文献方法在主观视觉感知方面更接近于真实图像.
文摘提出了一种基于Kinect的实时深度提取算法和单纹理+深度的多视绘制方法。在采集端,使用Kinect提取场景纹理和深度,并针对Kinect输出深度图的空洞提出一种快速修复算法。在显示端,针对单纹理+深度的基于深度图像的绘制(DIBR,depth image based rendering)绘制产生的大空洞,采用一种基于背景估计和前景分割的绘制方法。实验结果表明,本文方法可实时提取质量良好的深度图,并有效修复了DIBR绘制过程中产生的大空洞,得到质量较好的多路虚拟视点图像。以所提出的深度获取和绘制算法为核心,实现了一种基于深度的立体视频系统,最终的虚拟视点交织立体显示的立体效果良好,进一步验证了本文算法的有效性。本文系统可用于实景的多视点立体视频录制与播放。
文摘在自由视点视频系统中,如何能在视频终端得到高质量的视频图像已成为基于深度图的绘制(DIBR)技术所研究的主要任务,其中虚拟视点像素插值是该技术中影响绘制质量的一个重要环节。针对虚拟视点绘制标准方案中存在的问题,提出了一种基于空间加权的像素插值算法。它是通过对多个投影像素点的深度值和水平方向绝对距离进行加权操作来实现像素插值的。在插值过程中,该算法考虑了不同区域投影像素点个数对像素插值准确性的影响,从而剔除了部分失真像素点,并且在图像输出前还分别对左、右参考虚拟视点进行了失真检测和矫正。实验结果表明,该算法改善了绘制的主、客观质量,其中,PSNR平均提高0.30 d B,SSIM平均提高0.001 3。因此,该算法可以有效地抑制像素插值过程引入的噪声,提高像素插值的精度。
文摘目的基于深度图的绘制(DIBR)是一种新型的虚拟视点生成技术,在诸多方面得到了广泛的应用。然而,该技术还不能满足实时性的绘制需求。为了在保证绘制质量不下降的前提下,尽可能地提高绘制速度,提出了一种高效的3D-Warping(3维坐标变换)算法。方法主要在以下3个方面进行了改进:1)引入了深度—视差映射表技术,避免了重复地进行视差求取操作。2)对深度平坦的像素块进行基于块的3D-Warping,减少了映射的次数。对深度非平坦像素块中的像素点采取传统的基于像素点的3D-Warping,保证了映射的准确性。3)针对两种不同的3D-Warping方式,分别提出了相应的插值算法。在水平方向上,改进的像素插值算法对紧邻插值和Splatting(散射)插值算法进行了折中,只在映射像素点与待插值像素点很近的情况下才进行紧邻插值,否则进行Splatting插值;在深度方向上,它对Z-Buffer(深度缓存)技术进行了改进,舍弃了与前景物体太远的映射像素点,而对其他映射像素点按深度值进行加权操作。结果实验结果表明,与标准绘制方案的整像素精度相比,绘制时间平均节省了72.05%;与标准绘制方案的半像素精度相比,PSNR平均提高了0.355 d B,SSIM平均提高了0.001 15。结论改进算法非常适用于水平设置相机系统的DIBR技术中的整像素精度绘制,对包含大量深度平坦区域的视频序列效果明显,不但能够提高绘制的速度,而且可以有效地改善绘制的客观质量。
