首页 / 专利库 / 心理学与精神病学 / 感知 / 一种基于视觉感知的立体图像质量客观评价方法

一种基于视觉感知的立体图像质量客观评价方法

阅读:179发布:2023-01-02

专利汇可以提供一种基于视觉感知的立体图像质量客观评价方法专利检索,专利查询,专利分析的服务。并且本 发明 公开了一种基于视觉 感知 的立体图像 质量 客观评价方法,其首先通过计算立体图像的左右视点图像中的每个 像素 点的局部 相位 特征和局部振幅特征以获得每个像素点的客观评价度量值,并通过区域检测方法将立体图像划分为遮挡区域、双目抑制区域、双目融合区域,然后对各个区域分别进行评价并对各评价结果进行融合得到最终的图像质量客观评价预测值,优点在于获得的反映局部相位和局部振幅特征信息具有较强的 稳定性 且能够较好地反映立体图像的质量变化情况,提出遮挡区域、双目抑制区域和双目融合区域的图像质量评价方法能够很好地反映人类视觉系统的视觉感知特性,有效地提高客观评价结果与主观感知的相关性。,下面是一种基于视觉感知的立体图像质量客观评价方法专利的具体信息内容。

1.一种基于视觉感知的立体图像质量客观评价方法,其特征在于包括以下步骤:
①令Sorg为原始的无失真的立体图像,令Sdis为待评价的失真的立体图像,将Sorg的左视点图像记为{Lorg(x,y)},将Sorg的右视点图像记为{Rorg(x,y)},将Sdis的左视点图像记为{Ldis(x,y)},将Sdis的右视点图像记为{Rdis(x,y)},其中,(x,y)表示左视点图像和右视点图像中的像素点的坐标位置,1≤x≤W,1≤y≤H,W表示左视点图像和右视点图像的宽度,H表示左视点图像和右视点图像的高度,Lorg(x,y)表示{Lorg(x,y)}中坐标位置为(x,y)的像素点的像素值,Rorg(x,y)表示{Rorg(x,y)}中坐标位置为(x,y)的像素点的像素值,Ldis(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的像素值,Rdis(x,y)表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的像素值;
②利用人类立体视觉感知对背景光照和对比度的视觉掩蔽效应,分别提取出{Ldis(x,y)}的双目最小可察觉变化图像和{Rdis(x,y)}的双目最小可察觉变化图像,分别记为 和 其中, 表示{Ldis(x,y)}的双目最小可察觉变化图像
中坐标位置为(x,y)的像素点的像素值, 表示{Rdis(x,y)}的双目最小
可察觉变化图像 中坐标位置为(x,y)的像素点的像素值;
③利用区域检测算法,分别获取{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的区域类型,记为p,其中,p∈{1,2,3},p=1表示遮挡区域,p=2表示双目抑制区域,p=3表示双目融合区域;然后将{Ldis(x,y)}中的所有区域类型为p=1的像素点构成的遮挡区域记为 将{Ldis(x,y)}中的所有区域类型为p=2的像素点构成的双目抑制区域记为将{Ldis(x,y)}中的所有区域类型为p=3的像素点构成的双目融合区域记为 将{Rdis(x,y)}中的所有区域类型为p=1的像素点构成的遮挡区域记为 将{Rdis(x,y)}中的所有区域类型为p=2的像素点构成的双目抑制区域记为 将{Rdis(x,y)}中的所有区域类型为p=3的像素点构成的双目融合区域记为
④分别计算{Lorg(x,y)}、{Rorg(x,y)}、{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的局部相位特征和局部振幅特征,将{Lorg(x,y)}中的所有像素点的局部相位特征和局部振幅特征分别用集合表示为 和 将{Rorg(x,y)}中的所有像素点的局
部相位特征和局部振幅特征分别用集合表示为 和 将{Ldis(x,y)}
中的所有像素点的局部相位特征和局部振幅特征分别用集合表示为 和
将{Rdis(x,y)}中的所有像素点的局部相位特征和局部振幅特征分别用集合表示为 和 其中, 表示{Lorg(x,y)}中坐标位置为(x,y)
的像素点的局部相位特征, 表示{Lorg(x,y)}中坐标位置为(x,y)的像素点的局部振幅特征, 表示{Rorg(x,y)}中坐标位置为(x,y)的像素点的局部相位特征,表示{Rorg(x,y)}中坐标位置为(x,y)的像素点的局部振幅特征, 表示
{Ldis(x,y)}中坐标位置为(x,y)的像素点的局部相位特征, 表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的局部振幅特征, 表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的局部相位特征, 表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的局部振幅特征;
⑤根据{Lorg(x,y)}和{Ldis(x,y)}中的每个像素点的局部相位特征和局部振幅特征,计算{Ldis(x,y)}中的每个像素点的客观评价度量值,将{Ldis(x,y)}中的所有像素点的客观评价度量值用集合表示为{QL(x,y)},
根据{Rorg(x,y)}和{Rdis(x,y)}中的每个像素点的局部相位特征和局部振幅特征,计算{Rdis(x,y)}中的每个像素点的客观评价度量值,将{Rdis(x,y)}中的所有像素点的客观评价度量值用集合表示为{QR(x,y)},
其中,QL(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的客观评价度量值,QR(x,y)表示{Rdis(x,y)}中坐标位 置为(x,y)的像素点 的客观评价度 量值,wLP、wLA和b为训练参数,T1和T2为控制参数;
⑥根据{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的区域类型,并利用人类视觉系统对遮挡区域的视觉感知特性,计算Sdis中的遮挡区域的客观评价度量值,记为Qnc,其中, 表示{Ldis(x,y)}中区域类型为p=1的像
素点的个数, 表示{Rdis(x,y)}中区域类型为p=1的像素点的个数;
⑦根据{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的区域类型,并利用人类视觉系统对双目抑制区域的视觉感知特性,计算Sdis中的双目抑制区域的客观评价度量值,记为Qbs,其中,max()为取最大值函数,
⑧根据{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的区域类型,并利用人类视觉系统对双目融合区域的视觉感知特性,计算Sdis中的双目融合区域的客观评价度量值,记为Qbf, 其中,
⑨对Sdis中的遮挡区域的客观评价度量值Qnc、Sdis中的双目抑制区域的客观评价度量值Qbs和Sdis中的双目融合区域的客观评价度量值Qbf进行融合,得到Sdis的图像质量客观评价预测值,记为Q,Q=wnc×Qnc+wbs×Qbs+wbf×Qbf,其中,wnc、wbf和wbs为加权参数。
2.根据权利要求1所述的一种基于视觉感知的立体图像质量客观评价方法,其特征在于所述的步骤②的具体过程为:
②-1、计算{Ldis(x,y)}的亮度掩蔽效应的可视化阈值集合,记为{Tl(x,y)},其
中,Tl(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的亮度掩蔽效应的可视化阈值,bgl(x,y)表示{Ldis(x,y)}中以坐标位置为(x,y)的像素点为中心的5×5窗口内的所有像素点的亮度平均值;
②-2、计算{Ldis(x,y)}的对比度掩蔽效应的可视化阈值集合,记为{Tc(x,y)},Tc(x,y)=K(bgl(x,y))+ehl(x,y),其中,Tc(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的对比度掩蔽效应的可视化阈值,ehl(x,y)表示对{Ldis(x,y)}中坐标位置为(x,y)的像素点分别进行平方向和垂直方向边缘滤波后得到的平均梯度值,K(bgl(x,y))=-10-6×(0.7×bgl(x,y)2+32×bgl(x,y))+0.07;
②-3、对{Ldis(x,y)}的亮度掩蔽效应的可视化阈值集合{Tl(x,y)}和对比度掩蔽效应的可视化阈值集合{Tc(x,y)}进行融合,得到{Ldis(x,y)}的双目最小可察觉变化图像,记为②-4、计算{Rdis(x,y)}的亮度掩蔽效应的可视化阈值集合,记为{Tr(x,y)},其
中,Tr(x,y)表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的亮度掩蔽效应的可视化阈值,bgr(x,y)表示{Rdis(x,y)}中以坐标位置为(x,y)的像素点为中心的5×5窗口内的所有像素点的亮度平均值;
②-5、计算{Rdis(x,y)}的对比度掩蔽效应的可视化阈值集合,记为{Tc′(x,y)},Tc′(x,y)=K(bgr(x,y))+ehr(x,y),其中,Tc′(x,y)表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的对比度掩蔽效应的可视化阈值,ehr(x,y)表示对{Rdis(x,y)}中坐标位置为(x,y)的像素点分别进行水平方向和垂直方向边缘滤波后得到的平均梯度值,K(bgr(x,y))-6 2
=-10 ×(0.7×bgr(x,y)+32×bgr(x,y))+0.07;
②-6、对{Rdis(x,y)}的亮度掩蔽效应的可视化阈值集合{Tr(x,y)}和对比度掩蔽效应的可视化阈值集合{Tc′(x,y)}进行融合,得到{Rdis(x,y)}的双目最小可察觉变化图像,记为
3.根据权利要求1或2所述的一种基于视觉感知的立体图像质量客观评价方法,其特征在于所述的步骤③中利用区域检测算法分别获取{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的区域类型的具体过程为:
③-1、采用匹配法计算{Lorg(x,y)}与{Rorg(x,y)}之间的视差图像,记为其中, 表示 中坐标位置为(x,y)的像素点的像素值;
③-2、采用块匹配法计算{Ldis(x,y)}与{Rdis(x,y)}之间的视差图像,记为其中, 表示 中坐标位置为(x,y)的像素点的像素值;
③-3、判断 中坐标位置为(x1,y1)的像素点的像素值 是否为255,
如果是,则将{Ldis(x,y)}中坐标位置为(x1,y1)的像素点的区域类型标记为p=1,然后执行步骤③-6,否则,执行步骤③-4,其中,1≤x1≤W,1≤y1≤H;
③-4、判断 中坐标位置为(x1,y1)的像素点的像素值 是否大于
中坐标位置为(x1,y1)的像素点的像素值 如果是,则将{Ldis(x,y)}中
坐标位置为(x1,y1)的像素点的区域类型标记为p=2,然后执行步骤③-6,否则,执行步骤③-5;
③-5、判断 中坐标位置为(x1,y1)的像素点的像素值 是否小
于或等于 中坐标位置为(x1,y1)的像素点的像素值 如果是,则将
{Ldis(x,y)}中坐标位置为(x1,y1)的像素点的区域类型标记为p=3;
③-6、返回步骤③-3继续确定{Ldis(x,y)}中剩余的像素点的区域类型,直至{Ldis(x,y)}中的所有像素点的区域类型确定完毕;
③-7、采用块匹配法计算{Rorg(x,y)}与{Lorg(x,y)}之间的视差图像,记为其中, 表示 中坐标位置为(x,y)的像素点的像素值;
③-8、采用块匹配法计算{Rdis(x,y)}与{Ldis(x,y)}之间的视差图像,记为其中, 表示 中坐标位置为(x,y)的像素点的像素值;
③-9、判断 中坐标位置为(x1,y1)的像素点的像素值 是否为255,
如果是,则将{Rdis(x,y)}中坐标位置为(x1,y1)的像素点的区域类型标记为p=1,然后执行步骤③-12,否则,执行步骤③-10,其中,1≤x1≤W,1≤y1≤H;
③-10、判断 中坐标位置为(x1,y1)的像素点的像素值 是否大于
中坐标位置为(x1,y1)的像素点的像素值 如果是,则将{Rdis(x,y)}中
坐标位置为(x1,y1)的像素点的区域类型标记为p=2,然后执行步骤③-12,否则,执行步骤③-11;
③-11、判断 中坐标位置为(x1,y1)的像素点的像素值 是否小
于或等于 中坐标位置为(x1,y1)的像素点的像素值 如果是,则将
{Rdis(x,y)}中坐标位置为(x1,y1)的像素点的区域类型标记为p=3;
③-12、返回步骤③-9继续确定{Rdis(x,y)}中剩余的像素点的区域类型,直至{Rdis(x,y)}中的所有像素点的区域类型确定完毕。
4.根据权利要求3所述的一种基于视觉感知的立体图像质量客观评价方法,其特征在于所述的步骤④中{Lorg(x,y)}、{Rorg(x,y)}、{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的局部相位特征和局部振幅特征的获取过程为:
④-1、对{Lorg(x,y)}中的每个像素点进行相位一致性变换,得到{Lorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,将{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的偶对称频率响应记为eα,θ(x,y),将{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的奇对称频率响应记为oα,θ(x,y),其中,α表示滤波器的尺度因子,1≤α≤4,θ表示滤波器的方向因子,1≤θ≤4;
④-2、计算{Lorg(x,y)}中的每个像素点在不同方向的相位一致性特征,将{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同方向的相位一致性特征记为PCθ(x,y),其 中 ,
④-3、根据{Lorg(x,y)}中的每个像素点的最大相位一致性特征对应的方向,计算{Lorg(x,y)}中的每个像素点的局部相位特征和局部振幅特征,对于{Lorg(x,y)}中坐标位置为(x,y)的像素点,首先找出其在不同方向的相位一致性特征PCθ(x,y)中的最大相位一致性特征,其次找出该最大相位一致性特征对应的方向,记为θm,再次根据θm计算{Lorg(x,y)}中坐标位置为(x,y)的像素点的局部相位特征和局部振幅特征,分别对应记为 和
其 中,
表示{Lorg(x,y)}中坐标位置为(x,y)的
像素点在不同尺度和最大相位一致性特征对应的方向θm的偶对称频率响应, 表示{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和最大相位一致性特征对应的方向θm的奇对称频率响应,arctan()为取反余弦函数;
④-4、按照步骤④-1至步骤④-3获取{Lorg(x,y)}中的每个像素点的局部相位特征和局部振幅特征的操作,以相同的方式获取{Rorg(x,y)}、{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的局部相位特征和局部振幅特征。

说明书全文

一种基于视觉感知的立体图像质量客观评价方法

技术领域

[0001] 本发明涉及一种图像质量评价方法,尤其是涉及一种基于视觉感知的立体图像质量客观评价方法。

背景技术

[0002] 随着图像编码技术和立体显示技术的迅速发展,立体图像技术受到了越来越广泛的关注与应用,已成为当前的一个研究热点。立体图像技术利用人眼的双目视差原理,双目各自独立地接收来自同一场景的左右视点图像,通过大脑融合形成双目视差,从而欣赏到具有深度感和逼真感的立体图像。由于采集系统、存储压缩及传输设备的影响,立体图像会不可避免地引入一系列的失真,而与单通道图像相比,立体图像需要同时保证两个通道的图像质量,对其进行质量评价具有非常重要的意义。然而,目前对立体图像质量缺乏有效的客观评价方法进行评价。因此,建立有效的立体图像质量客观评价模型具有十分重要的意义。
[0003] 目前的立体图像质量客观评价方法直接将平面图像质量评价方法直接应用于评价立体图像质量,然而,对立体图像的左右视点图像进行融合产生立体感的过程并不是简单的左右视点图像叠加的过程,还难以用简单的数学方法来表示,因此,如何在立体图像质量评价过程中有效地对双目立体融合进行模拟,如何根据人眼的视觉掩蔽特性对客观评价结果进行调制,使得客观评价结果更加感觉符合人类视觉系统,都是在对立体图像进行客观质量评价过程中需要研究解决的问题。

发明内容

[0004] 本发明所要解决的技术问题是提供一种能够有效提高客观评价结果与主观感知的相关性的基于视觉感知的立体图像质量客观评价方法。
[0005] 本发明解决上述技术问题所采用的技术方案为:一种基于视觉感知的立体图像质量客观评价方法,其特征在于包括以下步骤:
[0006] ①令Sorg为原始的无失真的立体图像,令Sdis为待评价的失真的立体图像,将Sorg的左视点图像记为{Lorg(x,y)},将Sorg的右视点图像记为{Rorg(x,y)},将Sdis的左视点图像记为{Ldis(x,y)},将Sdis的右视点图像记为{Rdis(x,y)},其中,(x,y)表示左视点图像和右视点图像中的像素点的坐标位置,1≤x≤W,1≤y≤H,W表示左视点图像和右视点图像的宽度,H表示左视点图像和右视点图像的高度,Lorg(x,y)表示{Lorg(x,y)}中坐标位置为(x,y)的像素点的像素值,Rorg(x,y)表示{Rorg(x,y)}中坐标位置为(x,y)的像素点的像素值,Ldis(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的像素值,Rdis(x,y)表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的像素值;
[0007] ②利用人类立体视觉感知对背景光照和对比度的视觉掩蔽效应,分别提取出{Ldis(x,y)}的双目最小可察觉变化图像和{Rdis(x,y)}的双目最小可察觉变化图像,分别记为 和 其中, 表示{Ldis(x,y)}的双目最小可察觉变化图像中坐标位置为(x,y)的像素点的像素值, 表示{Rdis(x,y)}的双目最小
可察觉变化图像 中坐标位置为(x,y)的像素点的像素值;
[0008] ③利用区域检测算法,分别获取{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的区域类型,记为p,其中,p∈{1,2,3},p=1表示遮挡区域,p=2表示双目抑制区域,p=3表示双目融合区域;然后将{Ldis(x,y)}中的所有区域类型为p=1的像素点构成的遮挡区域记为 将{Ldis(x,y)}中的所有区域类型为p=2的像素点构成的双目抑制区域记为将{Ldis(x,y)}中的所有区域类型为p=3的像素点构成的双目融合区域记为 将{Rdis(x,y)}中的所有区域类型为p=1的像素点构成的遮挡区域记为 将{Rdis(x,y)}中的所有区域类型为p=2的像素点构成的双目抑制区域记为 将{Rdis(x,y)}中的所有区域类型为p=3的像素点构成的双目融合区域记为
[0009] ④分别计算{Lorg(x,y)}、{Rorg(x,y)}、{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的局部相位特征和局部振幅特征,将{Lorg(x,y)}中的所有像素点的局部相位特征和局部振幅特征分别用集合表示为 和 将{Rorg(x,y)}中的所有像素点的局部相位特征和局部振幅特征分别用集合表示为 和 将{Ldis(x,y)}
中的所有像素点的局部相位特征和局部振幅特征分别用集合表示为 和
将{Rdis(x,y)}中的所有像素点的局部相位特征和局部振幅特征分别用集合
表示为 和 其中, 表示{Lorg(x,y)}中坐标位置为(x,y)
的像素点的局部相位特征, 表示{Lorg(x,y)}中坐标位置为(x,y)的像素点的局部振幅特征, 表示{Rorg(x,y)}中坐标位置为(x,y)的像素点的局部相位特征,表示{Rorg(x,y)}中坐标位置为(x,y)的像素点的局部振幅特征, 表
示{Ldis(x,y)}中坐标位置为(x,y)的像素点的局部相位特征, 表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的局部振幅特征, 表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的局部相位特征, 表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的局部振幅特征;
[0010] ⑤根据{Lorg(x,y)}和{Ldis(x,y)}中的每个像素点的局部相位特征和局部振幅特征,计算{Ldis(x,y)}中的每个像素点的客观评价度量值,将{Ldis(x,y)}中的所有像素点的客观评价度量值用集合表示为{QL(x,y)},根据{Rorg(x,y)}和{Rdis(x,y)}中的每个像素点的局部相位特征和局部振幅特征,计dis
算{Rdis(x,y)}中的每个像素点的客观评价度量值,将{R (x,y)}中的所有像素点的客观评价度量值用集合表示为{QR(x,y)},
其中,QL(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的客观评价度量值,QR(x,y)表示{Rdis(x,y)}中坐标位 置为(x,y)的像素点 的客观评价度 量值,wLP、wLA和b为训练参数,T1和T2为控制参数;
[0011] ⑥根据{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的区域类型,并利用人类视觉系统对遮挡区域的视觉感知特性,计算Sdis中的遮挡区域的客观评价度量值,记为Qnc,其中, 表示{Ldis(x,y)}中区域类型为p=1的像素点的个数, 表示{Rdis(x,y)}中区域类型为p=1的像素点的个数;
[0012] ⑦根据{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的区域类型,并利用人类视觉系统对双目抑制区域的视觉感知特性,计算Sdis中的双目抑制区域的客观评价度量值,记为Qbs, 其中,max()为取最大值函数,
[0013] ⑧根据{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的区域类型,并利用人类视觉系统对双目融合区域的视觉感知特性,计算Sdis中的双目融合区域的客观评价度量值,记为Qbf, 其中,
[0014] ⑨对Sdis中的遮挡区域的客观评价度量值Qnc、Sdis中的双目抑制区域的客观评价度量值Qbs和Sdis中的双目融合区域的客观评价度量值Qbf进行融合,得到Sdis的图像质量客观评价预测值,记为Q,Q=wnc×Qnc+wbs×Qbs+wbf×Qbf,其中,wnc、wbf和wbs为加权参数。
[0015] 所述的步骤②的具体过程为:
[0016] ②-1、计算{Ldis(x,y)}的亮度掩蔽效应的可视化阈值集合,记为{Tl(x,y)},其中,Tl(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的亮度掩蔽效应的可视化阈值,bgl(x,y)表示{Ldis(x,y)}中以坐标位置为(x,y)的像素点为中心的5×5窗口内的所有像素点的亮度平均值;
[0017] ②-2、计算{Ldis(x,y)}的对比度掩蔽效应的可视化阈值集合,记为{Tc(x,y)},Tc(x,y)=K(bgl(x,y))+ehl(x,y),其中,Tc(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的对比度掩蔽效应的可视化阈值,ehl(x,y)表示对{Ldis(x,y)}中坐标位置为(x,y)的-6像素点分别进行平方向和垂直方向边缘滤波后得到的平均梯度值,K(bgl(x,y))=-10 ×
2
(0.7×bgl(x,y)+32×bgl(x,y))+0.07;
[0018] ②-3、对{Ldis(x,y)}的亮度掩蔽效应的可视化阈值集合{Tl(x,y)}和对比度掩蔽效应的可视化阈值集合{Tc(x,y)}进行融合,得到{Ldis(x,y)}的双目最小可察觉变化图像,记为
[0019] ②-4、计算{Rdis(x,y)}的亮度掩蔽效应的可视化阈值集合,记为{Tr(x,y)},其中,Tr(x,y)表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的亮度掩蔽效应的可视化阈值,bgr(x,y)表示{Rdis(x,y)}中以坐标位置为(x,y)的像素点为中心的5×5窗口内的所有像素点的亮度平均值;
[0020] ②-5、计算{Rdis(x,y)}的对比度掩蔽效应的可视化阈值集合,记为{Tc′(x,y)},Tc′(x,y)=K(bgr(x,y))+ehr(x,y),其中,Tc′(x,y)表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的对比度掩蔽效应的可视化阈值,ehr(x,y)表示对{Rdis(x,y)}中坐标位置为(x,y)的像素点分别进行水平方向和垂直方向边缘滤波后得到的平均梯度值,K(bgr(x,y))=-10-6×(0.7×bgr(x,y)2+32×bgr(x,y))+0.07;
[0021] ②-6、对{Rdis(x,y)}的亮度掩蔽效应的可视化阈值集合{Tr(x,y)}和对比度掩蔽效应的可视化阈值集合{Tc′(x,y)}进行融合,得到{Rdis(x,y)}的双目最小可察觉变化图像,记为
[0022] 所述的步骤③中利用区域检测算法分别获取{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的区域类型的具体过程为:
[0023] ③-1、采用匹配法计算{Lorg(x,y)}与{Rorg(x,y)}之间的视差图像,记为其中, 表示 中坐标位置为(x,y)的像素点的像素值;
[0024] ③-2、采用块匹配法计算{Ldis(x,y)}与{Rdis(x,y)}之间的视差图像,记为其中, 表示 中坐标位置为(x,y)的像素点的像素值;
[0025] ③-3、判断 中坐标位置为(x1,y1)的像素点的像素值 是否为255,如果是,则将{Ldis(x,y)}中坐标位置为(x1,y1)的像素点的区域类型标记为p=1,然后执行步骤③-6,否则,执行步骤③-4,其中,1≤x1≤W,1≤y1≤H;
[0026] ③-4、判断 中坐标位置为(x1,y1)的像素点的像素值 是否大于中坐标位置为(x1,y1)的像素点的像素值 如果是,则将{Ldis(x,y)}中
坐标位置为(x1,y1)的像素点的区域类型标记为p=2,然后执行步骤③-6,否则,执行步骤③-5;
[0027] ③-5、判断 中坐标位置为(x1,y1)的像素点的像素值 是否小于或等于 中坐标位置为(x1,y1)的像素点的像素值 如果是,则将
{Ldis(x,y)}中坐标位置为(x1,y1)的像素点的区域类型标记为p=3;
[0028] ③-6、返回步骤③-3继续确定{Ldis(x,y)}中剩余的像素点的区域类型,直至{Ldis(x,y)}中的所有像素点的区域类型确定完毕;
[0029] ③-7、采用块匹配法计算{Rorg(x,y)}与{Lorg(x,y)}之间的视差图像,记为其中, 表示 中坐标位置为(x,y)的像素点的像素值;
[0030] ③-8、采用块匹配法计算{Rdis(x,y)}与{Ldis(x,y)}之间的视差图像,记为其中, 表示 中坐标位置为(x,y)的像素点的像素值;
[0031] ③-9、判断 中坐标位置为(x1,y1)的像素点的像素值 是否为255,如果是,则将{Rdis(x,y)}中坐标位置为(x1,y1)的像素点的区域类型标记为p=1,然后执行步骤③-12,否则,执行步骤③-10,其中,1≤x1≤W,1≤y1≤H;
[0032] ③-10、判断 中坐标位置为(x1,y1)的像素点的像素值 是否大于 中坐标位置为(x1,y1)的像素点的像素值 如果是,则将{Rdis(x,y)}
中坐标位置为(x1,y1)的像素点的区域类型标记为p=2,然后执行步骤③-12,否则,执行步骤③-11;
[0033] ③-11、判断 中坐标位置为(x1,y1)的像素点的像素值 是否小于或等于 中坐标位置为(x1,y1)的像素点的像素值 如果是,则将
{Rdis(x,y)}中坐标位置为(x1,y1)的像素点的区域类型标记为p=3;
[0034] ③-12、返回步骤③-9继续确定{Rdis(x,y)}中剩余的像素点的区域类型,直至{Rdis(x,y)}中的所有像素点的区域类型确定完毕。
[0035] 所述的步骤④中{Lorg(x,y)}、{Rorg(x,y)}、{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的局部相位特征和局部振幅特征的获取过程为:
[0036] ④-1、对{Lorg(x,y)}中的每个像素点进行相位一致性变换,得到{Lorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,将{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的偶对称频率响应记为eα,θ(x,y),将{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的奇对称频率响应记为oα,θ(x,y),其中,α表示滤波器的尺度因子,1≤α≤4,θ表示滤波器的方向因子,1≤θ≤4;
[0037] ④-2、计算{Lorg(x,y)}中的每个像素点在不同方向的相位一致性特征,将{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同方向的相位一致性特征记为PCθ(x,y), 其中,
[0038] ④-3、根据{Lorg(x,y)}中的每个像素点的最大相位一致性特征对应的方向,计算{Lorg(x,y)}中的每个像素点的局部相位特征和局部振幅特征,对于{Lorg(x,y)}中坐标位置为(x,y)的像素点,首先找出其在不同方向的相位一致性特征PCθ(x,y)中的最大相位一致性特征,其次找出该最大相位一致性特征对应的方向,记为θm,再次根据θm计算{Lorg(x,y)}中坐标位置为(x,y)的像素点的局部相位特征和局部振幅特征,分别对应记为 和其 中,
表示{Lorg(x,y)}中坐标位置为(x,y)的像
素点在不同尺度和最大相位一致性特征对应的方向θm的偶对称频率响应, 表示{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和最大相位一致性特征对应的方向θm的奇对称频率响应,arctan()为取反余弦函数;
[0039] ④-4、按照步骤④-1至步骤④-3获取{Lorg(x,y)}中的每个像素点的局部相位特征和局部振幅特征的操作,以相同的方式获取{Rorg(x,y)}、{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的局部相位特征和局部振幅特征。
[0040] 与现有技术相比,本发明的优点在于:
[0041] 1)本发明方法考虑到不同区域对立体感知有不同的响应,将立体图像划分为遮挡区域、双目抑制区域和双目融合区域并分别进行评价,并对各评价结果进行融合得到最终的评价分值,使得评价结果更加感觉符合人类视觉系统。
[0042] 2)本发明方法通过计算立体图像的左右视点图像中的每个像素点的局部相位特征和局部振幅特征,以获取每个像素点的客观评价度量值,由于获得的局部相位特征和局部振幅特征具有较强的稳定性且能够较好地反映立体图像的质量变化情况,因此有效地提高了客观评价结果与主观感知的相关性。
[0043] 3)本发明方法根据人眼的立体视觉特性得到双目最小可察觉变化图像,对遮挡区域、双目抑制区域和双目融合区域中的每个像素点的客观评价度量值进行不同程度的加权,使得评价结果更加感觉符合人类视觉系统,提高客观评价结果与主观感知的相关性。附图说明
[0044] 图1为本发明方法的总体实现框图
[0045] 图2a为Akko(尺寸为640×480)立体图像的左视点图像;
[0046] 图2b为Akko(尺寸为640×480)立体图像的右视点图像;
[0047] 图3a为Altmoabit(尺寸为1024×768)立体图像的左视点图像;
[0048] 图3b为Altmoabit(尺寸为1024×768)立体图像的右视点图像;
[0049] 图4a为Balloons(尺寸为1024×768)立体图像的左视点图像;
[0050] 图4b为Balloons(尺寸为1024×768)立体图像的右视点图像;
[0051] 图5a为Doorflower(尺寸为1024×768)立体图像的左视点图像;
[0052] 图5b为Doorflower(尺寸为1024×768)立体图像的右视点图像;
[0053] 图6a为Kendo(尺寸为1024×768)立体图像的左视点图像;
[0054] 图6b为Kendo(尺寸为1024×768)立体图像的右视点图像;
[0055] 图7a为LeaveLaptop(尺寸为1024×768)立体图像的左视点图像;
[0056] 图7b为LeaveLaptop(尺寸为1024×768)立体图像的右视点图像;
[0057] 图8a为Lovebierd1(尺寸为1024×768)立体图像的左视点图像;
[0058] 图8b为Lovebierd1(尺寸为1024×768)立体图像的右视点图像;
[0059] 图9a为Newspaper(尺寸为1024×768)立体图像的左视点图像;
[0060] 图9b为Newspaper(尺寸为1024×768)立体图像的右视点图像;
[0061] 图10a为Puppy(尺寸为720×480)立体图像的左视点图像;
[0062] 图10b为Puppy(尺寸为720×480)立体图像的右视点图像;
[0063] 图11a为Soccer2(尺寸为720×480)立体图像的左视点图像;
[0064] 图11b为Soccer2(尺寸为720×480)立体图像的右视点图像;
[0065] 图12a为Horse(尺寸为720×480)立体图像的左视点图像;
[0066] 图12b为Horse(尺寸为720×480)立体图像的右视点图像;
[0067] 图13a为Xmas(尺寸为640×480)立体图像的左视点图像;
[0068] 图13b为Xmas(尺寸为640×480)立体图像的右视点图像;
[0069] 图14为失真立体图像集合中各个失真的立体图像的图像质量客观评价预测值与平均主观评分差值的散点图。

具体实施方式

[0070] 以下结合附图实施例对本发明作进一步详细描述。
[0071] 本发明提出的一种基于视觉感知的立体图像质量客观评价方法,其总体实现框图如图1所示,其包括以下步骤:
[0072] ①令Sorg为原始的无失真的立体图像,令Sdis为待评价的失真的立体图像,将Sorg的左视点图像记为{Lorg(x,y)},将Sorg的右视点图像记为{Rorg(x,y)},将Sdis的左视点图像记为{Ldis(x,y)},将Sdis的右视点图像记为{Rdis(x,y)},其中,(x,y)表示左视点图像和右视点图像中的像素点的坐标位置,1≤x≤W,1≤y≤H,W表示左视点图像和右视点图像的宽度,H表示左视点图像和右视点图像的高度,Lorg(x,y)表示{Lorg(x,y)}中坐标位置为(x,y)的像素点的像素值,Rorg(x,y)表示{Rorg(x,y)}中坐标位置为(x,y)的像素点的像素值,Ldis(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的像素值,Rdis(x,y)表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的像素值。
[0073] ②人类视觉特性表明,人眼对图像中变化较小的属性或噪声是不可感知的,除非该属性或噪声的变化强度超过某一阈值,该阈值就是最小可察觉失真(Just noticeable difference,JND)。然而人眼的视觉掩蔽效应是一种局部效应,其受背景照度、纹理复杂度等因素的影响,背景越亮,纹理越复杂,界限值就越高。因此本发明利用人类立体视觉感知对背景光照和对比度的视觉掩蔽效应,分别提取出{Ldis(x,y)}的双目最小可察觉变化图像和{Rdis(x,y)}的双目最小可察觉变化图像,分别记为 和 其中,表示{Ldis(x,y)}的双目最小可察觉变化图像 中坐标位置为(x,y)的像
素点的像素值, 表示{Rdis(x,y)}的双目最小可察觉变化图像 中坐标位
置为(x,y)的像素点的像素值。
[0074] 在此具体实施例中,步骤②的具体过程为:
[0075] ②-1、计算{Ldis(x,y)}的亮度掩蔽效应的可视化阈值集合,记为{Tl(x,y)},其中,Tl(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的亮度掩蔽效应的可视化阈值,bgl(x,y)表示{Ldis(x,y)}中以坐标位置为(x,y)的像素点为中心的5×5窗口内的所有像素点的亮度平均值。
[0076] ②-2、计算{Ldis(x,y)}的对比度掩蔽效应的可视化阈值集合,记为{Tc(x,y)},Tc(x,y)=K(bgl(x,y))+ehl(x,y),其中,Tc(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的对比度掩蔽效应的可视化阈值,ehl(x,y)表示对{Ldis(x,y)}中坐标位置为(x,y)的-6像素点分别进行水平方向和垂直方向边缘滤波后得到的平均梯度值,K(bgl(x,y))=-10 ×
2
(0.7×bgl(x,y)+32×bgl(x,y))+0.07。
[0077] ②-3、对{Ldis(x,y)}的亮度掩蔽效应的可视化阈值集合{Tl(x,y)}和对比度掩蔽效应的可视化阈值集合{Tc(x,y)}进行融合,得到{Ldis(x,y)}的双目最小可察觉变化图像,记为
[0078] ②-4、计算{Rdis(x,y)}的亮度掩蔽效应的可视化阈值集合,记为{Tr(x,y)},其中,Tr(x,y)表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的亮度掩蔽效应的可视化阈值,bgr(x,y)表示{Rdis(x,y)}中以坐标位置为(x,y)的像素点为中心的5×5窗口内的所有像素点的亮度平均值。
[0079] ②-5、计算{Rdis(x,y)}的对比度掩蔽效应的可视化阈值集合,记为{Tc′(x,y)},Tc′(x,y)=K(bgr(x,y))+ehr(x,y),其中,Tc′(x,y)表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的对比度掩蔽效应的可视化阈值,ehr(x,y)表示对{Rdis(x,y)}中坐标位置为(x,y)的像素点分别进行水平方向和垂直方向边缘滤波后得到的平均梯度值,K(bgr(x,y))-6 2=-10 ×(0.7×bgr(x,y)+32×bgr(x,y))+0.07。
[0080] ②-6、对{Rdis(x,y)}的亮度掩蔽效应的可视化阈值集合{Tr(x,y)}和对比度掩蔽效应的可视化阈值集合{Tc′(x,y)}进行融合,得到{Rdis(x,y)}的双目最小可察觉变化图像,记为
[0081] ③利用区域检测算法,分别获取{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的区域类型,记为p,其中,p∈{1,2,3},p=1表示遮挡区域,p=2表示双目抑制区域,p=3表示双目融合区域;然后将{Ldis(x,y)}中的所有区域类型为p=1的像素点构成的遮挡区域记为 将{Ldis(x,y)}中的所有区域类型为p=2的像素点构成的双目抑制区域记为将{Ldis(x,y)}中的所有区域类型为p=3的像素点构成的双目融合区域记为 将{Rdis(x,y)}中的所有区域类型为p=1的像素点构成的遮挡区域记为 将{Rdis(x,y)}中的所有区域类型为p=2的像素点构成的双目抑制区域记为 将{Rdis(x,y)}中的所有区域类型为p=3的像素点构成的双目融合区域记为
[0082] 在此具体实施例中,步骤③中利用区域检测算法分别获取{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的区域类型的具体过程为:
[0083] ③-1、采用块匹配法计算{Lorg(x,y)}与{Rorg(x,y)}之间的视差图像,记为其中, 表示 中坐标位置为(x,y)的像素点的像素值。
[0084] ③-2、采用块匹配法计算{Ldis(x,y)}与{Rdis(x,y)}之间的视差图像,记为其中, 表示 中坐标位置为(x,y)的像素点的像素值。
[0085] ③-3、判断 中坐标位置为(x1,y1)的像素点的像素值 是否为255,如果是,则将{Ldis(x,y)}中坐标位置为(x1,y1)的像素点的区域类型标记为p=1,然后执行步骤③-6,否则,执行步骤③-4,其中,1≤x1≤W,1≤y1≤H。
[0086] ③-4、判断 中坐标位置为(x1,y1)的像素点的像素值 是否大于中坐标位置为(x1,y1)的像素点的像素值 如果是,则将{Ldis(x,y)}
中坐标位置为(x1,y1)的像素点的区域类型标记为p=2,然后执行步骤③-6,否则,执行步骤③-5。
[0087] ③-5、判断 中坐标位置为(x1,y1)的像素点的像素值 是否小于或等于 中坐标位置为(x1,y1)的像素点的像素值 如果是,则将
{Ldis(x,y)}中坐标位置为(x1,y1)的像素点的区域类型标记为p=3。
[0088] ③-6、返回步骤③-3继续确定{Ldis(x,y)}中剩余的像素点的区域类型,直至{Ldis(x,y)}中的所有像素点的区域类型确定完毕。
[0089] ③-7、采用块匹配法计算{Rorg(x,y)}与{Lorg(x,y)}之间的视差图像,记为其中, 表示 中坐标位置为(x,y)的像素点的像素值。
[0090] ③-8、采用块匹配法计算{Rdis(x,y)}与{Ldis(x,y)}之间的视差图像,记为其中, 表示 中坐标位置为(x,y)的像素点的像素值。
[0091] ③-9、判断 中坐标位置为(x1,y1)的像素点的像素值 是否为255,如果是,则将{Rdis(x,y)}中坐标位置为(x1,y1)的像素点的区域类型标记为p=1,然后执行步骤③-12,否则,执行步骤③-10,其中,1≤x1≤W,1≤y1≤H。
[0092] ③-10、判断 中坐标位置为(x1,y1)的像素点的像素值 是否大于 中坐标位置为(x1,y1)的像素点的像素值 如果是,则将{Rdis(x,y)}
中坐标位置为(x1,y1)的像素点的区域类型标记为p=2,然后执行步骤③-12,否则,执行步骤③-11。
[0093] ③-11、判断 中坐标位置为(x1,y1)的像素点的像素值 是否小于或等于 中坐标位置为(x1,y1)的像素点的像素值 如果是,则将
{Rdis(x,y)}中坐标位置为(x1,y1)的像素点的区域类型标记为p=3。
[0094] ③-12、返回步骤③-9继续确定{Rdis(x,y)}中剩余的像素点的区域类型,直至{Rdis(x,y)}中的所有像素点的区域类型确定完毕。
[0095] 在此,块匹配法采用现有的经典的块匹配法,其基本思想是将图像分成小块,对左视点图像(右视点图像)的每一小块,在右视点图像(左视点图像)中寻找相关性最大的小块,两个小块之间的空间位移量就是视差。
[0096] ④分别计算{Lorg(x,y)}、{Rorg(x,y)}、{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的局部相位特征和局部振幅特征,将{Lorg(x,y)}中的所有像素点的局部相位特征和局部振幅特征分别用集合表示为 和 将{Rorg(x,y)}中的所有像素点的局部相位特征和局部振幅特征分别用集合表示为 和 将{Ldis(x,y)}
中的所有像素点的局部相位特征和局部振幅特征分别用集合表示为 和
将{Rdis(x,y)}中的所有像素点的局部相位特征和局部振幅特征分别用集合
表示为 和 其中, 表示{Lorg(x,y)}中坐标位置为(x,y)
的像素点的局部相位特征, 表示{Lorg(x,y)}中坐标位置为(x,y)的像素点的局部振幅特征, 表示{Rorg(x,y)}中坐标位置为(x,y)的像素点的局部相位特征,表示{Rorg(x,y)}中坐标位置为(x,y)的像素点的局部振幅特征, 表
示{Ldis(x,y)}中坐标位置为(x,y)的像素点的局部相位特征, 表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的局部振幅特征, 表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的局部相位特征, 表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的局部振幅特征。
[0097] 在此具体实施例中,步骤④中{Lorg(x,y)}、{Rorg(x,y)}、{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的局部相位特征和局部振幅特征的获取过程为:
[0098] ④-1、对{Lorg(x,y)}中的每个像素点进行相位一致性变换,得到{Lorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,将{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的偶对称频率响应记为eα,θ(x,y),将{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的奇对称频率响应记为oα,θ(x,y),其中,α表示滤波器的尺度因子,1≤α≤4,θ表示滤波器的方向因子,1≤θ≤4。
[0099] ④-2、计算{Lorg(x,y)}中的每个像素点在不同方向的相位一致性特征,将{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同方向的相位一致性特征记为PCθ(x,y), 其中,
[0100] ④-3、根据{Lorg(x,y)}中的每个像素点的最大相位一致性特征对应的方向,计算{Lorg(x,y)}中的每个像素点的局部相位特征和局部振幅特征,对于{Lorg(x,y)}中坐标位置为(x,y)的像素点,首先找出其在不同方向的相位一致性特征PCθ(x,y)中的最大相位一致性特征,其次找出该最大相位一致性特征对应的方向,记为θm,再次根据θm计算{Lorg(x,y)}中坐标位置为(x,y)的像素点的局部相位特征和局部振幅特征,分别对应记为 和其 中,
表示{Lorg(x,y)}中坐标位置为(x,y)的
像素点在不同尺度和最大相位一致性特征对应的方向θm的偶对称频率响应, 表示{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和最大相位一致性特征对应的方向θm的奇对称频率响应,arctan()为取反余弦函数。
[0101] ④-4、按照步骤④-1至步骤④-3获取{Lorg(x,y)}中的每个像素点的局部相位特征和局部振幅特征的操作,以相同的方式获取{Rorg(x,y)}、{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的局部相位特征和局部振幅特征。
[0102] ⑤根据{Lorg(x,y)}和{Ldis(x,y)}中的每个像素点的局部相位特征和局部振幅特征,计算{Ldis(x,y)}中的每个像素点的客观评价度量值,将{Ldis(x,y)}中的所有像素点的客观评价度量值用集合表示为{QL(x,y)},根据{Rorg(x,y)}和{Rdis(x,y)}中的每个像素点的局部相位特征和局部振幅特征,计算{Rdis(x,y)}中的每个像素点的客观评价度量值,将{Rdis(x,y)}中的所有像素点的客观评价度量值用集合表示为{QR(x,y)},
其中,QL(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的客观评价度量值,QR(x,y)表示{Rdis(x,y)}中坐标位 置为(x,y)的像素点 的客观评价度 量值,wLP、wLA和b为训练参数,T1和T2为控制参数。
[0103] 在此具体实施例中,根据局部相位特征和局部振幅特征对立体图像质量变化的不同影响,取wLP=0.9834、wLA=0.2915、b=0,取T1=0.85、T2=160。
[0104] ⑥遮挡区域主要是由失真的立体图像中视差匹配不成功的像素所构成的,包括左视点图像的遮挡区域和右视点图像的遮挡区域,人类视觉特性系统对该遮挡区域的感知主要是单目视觉起主要作用。因此本发明根据{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的区域类型,并利用人类视觉系统对遮挡区域的视觉感知特性,计算Sdis中的遮挡区域的客观评价度量值,记为Qnc, 其中, 表示{Ldis(x,y)}中区域类型为p=1的像素点的个数, 表示{Rdis(x,y)}中区域类型为p=1的像素点的个数。
[0105] ⑦人类视觉系统特性表明,如果左右眼视网膜对应区域的图像内容差异较大或者两者之间的视差值较大,则人类视觉系统往往无法进行对两眼冲突的信息进行双目融合操作,转至双目掩蔽处理,在双目掩蔽处理过程中,质量高的视点往往会抑制低质量的视点。因此本发明根据{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的区域类型,并利用人类视觉系统对双目抑制区域的视觉感知特性,计算Sdis中的双目抑制区域的客观评价度量值,记为Qbs, 其中,max()为取最大值函数,
[0106] ⑧人类视觉特性表明,如果左右眼视网膜对应区域的图像内容差异较小,则人类视觉系统会对该区域进行双目叠加(融合)操作,从而导致双眼对该区域的视觉敏感度是单眼的1.4倍。因此本发明根据{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的区域类型,并利用人类视觉系统对双目融合区域的视觉感知特性,计算Sdis中的双目融合区域的客观评价度量值,记为Qbf, 其中,
[0107] ⑨对Sdis中的遮挡区域的客观评价度量值Qnc、Sdis中的双目抑制区域的客观评价度量值Qbs和Sdis中的双目融合区域的客观评价度量值Qbf进行融合,得到Sdis的图像质量客观评价预测值,记为Q,Q=wnc×Qnc+wbs×Qbs+wbf×Qbf,其中,wnc、wbf和wbs为加权参数。在此具体实施例中,取wnc=0.1163、wbf=0.4119和wbs=0.4718。
[0108] 在本实施例中,利用图2a和图2b、图3a和图3b、图4a和图4b、图5a和图5b、图6a和图6b、图7a和图7b、图8a和图8b、图9a和图9b、图10a和图10b、图11a和图11b、图12a和图12b、图13a和图13b所示的12幅无失真的立体图像建立其在不同程度的JPEG压缩、JPEG2000压缩、高斯模糊、白噪声和H.264编码失真情况下的312幅失真的立体图像来分析通过本发明方法得到的失真的立体图像Sdis的图像质量客观评价预测值与平均主观评分差值之间的相关性,其中JPEG压缩的失真的立体图像共60幅,JPEG2000压缩的失真的立体图像共60幅,高斯模糊(Gaussian Blur)的失真的立体图像共60幅,白噪声(White Noise)的失真的立体图像共60幅,H.264编码的失真的立体图像共72幅。并利用现有的主观质量评价方法分别获取失真立体图像集合中每幅失真的立体图像的平均主观评分差值,记为DMOS,DMOS=100-MOS,其中,MOS表示主观评分均值,DMOS∈[0,100]。
[0109] 在本实施例中,利用评估图像质量评价方法的4个常用客观参量作为评价指标,即非线性回归条件下的Pearson相关系数(Pearson linear correlation coefficient,PLCC)、Spearman相关系数(Spearman rank order correlation coefficient,SROCC),Kendall相关系数(Kendall rank-order correlation coefficient,KROCC),均方误差(root mean squared error,RMSE),PLCC和RMSE反映失真的立体图像评价客观模型的准确性,SROCC和KROCC反映其单调性。将按本发明方法计算得到的失真的立体图像的图像质量客观评价预测值做五参数Logistic函数非线性拟合,PLCC、SROCC和KROCC值越高,RMSE值越低说明客观评价方法与平均主观评分差值相关性越好。反映立体图像客观评价模型性能的PLCC、SROCC、KROCC和RMSE系数如表1所示,从表1所列的数据可知,按本发明方法得到的失真的立体图像的最终的图像质量客观评价预测值与平均主观评分差值之间的相关性是很高的,表明客观评价结果与人眼主观感知的结果较为一致,足以说明本发明方法的有效性。
[0110] 图14给出了失真立体图像集合中各个失真的立体图像的图像质量客观评价预测值与平均主观评分差值的散点图,散点越集中,说明客观模型与主观感知的一致性越好。从图14中可以看出,采用本发明方法得到的散点图比较集中,与主观评价数据之间的吻合度较高。
[0111] 表1利用本发明方法得到的失真的立体图像的图像质量客观评价预测值与主观评分之间的相关性
[0112]
相关专利内容
标题 发布/更新时间 阅读量
一种以物联网为依托的感知城市系统 2020-05-11 598
感知导盲鞋 2020-05-12 71
工件感知器和感知系统 2020-05-12 759
一种感知置物箱 2020-05-11 560
含氧感知器 2020-05-12 604
感知装置 2020-05-11 332
热感知器 2020-05-11 63
感知装置 2020-05-11 86
手势感知器 2020-05-12 963
感知锚杆 2020-05-12 110
高效检索全球专利

专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。

我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。

申请试用

分析报告

专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。

申请试用

QQ群二维码
意见反馈