一种立体电视系统中深度图像的编码方法
专利汇可以提供一种立体电视系统中深度图像的编码方法专利检索，专利查询，专利分析的服务。并且本 发明 公开了一种立体电视系统中 深度图 像 的编码方法。它包括如下步骤：1)计算深度图像中每个 像素 点的边缘强度值，然后根据象素点的边缘强度值计算每个宏 块 的边缘强度值；2)把深度图像中的所有宏块分为强边缘宏块、中等边缘宏块和弱边缘宏块三类；3)对强边缘宏块设置较小量化参数，对中等边缘宏块设置中等量化参数，对弱边缘宏块设置较大量化参数；4)根据设置的量化参数对深度图像中的所有宏块，运用 视频编码 技术对深度图像进行编码。本发明对强边缘宏块设置小的量化参数，从而有效地保护深度图像的边缘信息，提高用户端自由视点图像绘制的 质量 。，下面是一种立体电视系统中深度图像的编码方法专利的具体信息内容。
1.一种立体电视系统中深度图像的编码方法，其特征在于包括如下步骤：
1)计算深度图像中每个像素点的边缘强度值，然后根据象素点的边缘强度值 计算每个宏块的边缘强度值；
2)把深度图像中的所有宏块分为强边缘宏块、中等边缘宏块和弱边缘宏块三 类；
3)对强边缘宏块设置较小量化参数，对中等边缘宏块设置中等量化参数，对 弱边缘宏块设置较大量化参数；
4)根据设置的量化参数对深度图像中的所有宏块，运用视频编码技术对深度 图像进行编码。
2.根据权利要求1所述的一种立体电视系统中深度图像的编码方法，其特征 在于所述的计算深度图像中每个像素点的边缘强度值，然后根据象素点的边缘 强度值计算每个宏块的边缘强度值步骤：
a)对深度图像中每个像素点，根据下列式子，在3×3临域中选择九个相关 亮度值：
Z1＝p(clipX(x-1)，clipY(y-1))； Z2＝p(clipX(x)，clipY(y-1))；
Z3＝p(clipX(x+1)，clipY(y-1))； Z4＝p(clipX(x-1)，clipY(y))；
Z5＝p(clipX(x)，clipY(y))； Z6＝p(clipX(x+1)，clipY(y))；
Z7＝p(clipX(x-1)，clipY(y+1))； Z8＝p(clipX(x)，clipY(y+1))；
Z9＝p(clipX(x+1)，clipY(y+1))；
clipX(x)＝min(Width-1，max(0，x))；clipY(y)＝min(Hight-1，max(0，y))；
其中，p(x，y)是深度图像中坐标(x，y)处的像素点的亮度值；clipX(x)和clipY(x) 分别是x方向和y方向的修剪函数；Width和Hight分别为深度图像的宽度和高 度；Z1、Z2、Z3、Z4、Z5、Z6、Z7、Z8和Z9是九个相关亮度值。
b)根据下式计算像素点在x方向的梯度：
G_X(x，y)＝(Z7+2*Z8+Z9)-(Z1+2*Z2+Z3)；
其中，G_X(x，y)是坐标(x，y)处像素点在x方向的梯度；
c)根据下式计算像素点在y方向的梯度：
G_Y(x，y)＝(Z3+2*Z6+Z9)-(Z1+2*Z4+Z7)；
其中，G_Y(x，y)是坐标(x，y)处像素点在y方向的梯度；
d)根据下式计算像素点的边缘强度值：
G_Pixel＝|G_X(x，y)|+|G_Y(x，y)|；
其中，G_X(x，y)是坐标(x，y)处像素点在x方向的梯度，G_Y(x，y)是坐标(x，y) 处像素点在y方向的梯度，G_Pixel(x，y)是坐标(x，y)处像素点的边缘强度值；
e)根据下式计算每个宏块的边缘强度值：
其中，i是当前宏块的序列号，(MB_x，MB_y)是当前宏块中左上角像素在深 度图像中的坐标，G_Pixel(x，y)是坐标(x，y)处像素点的边缘强度值，G_MB(i)是 当前宏块的的边缘强度值；
3.根据权利要求1所述的一种立体电视系统中深度图像的编码方法，其特征 在于所述的把深度图像中的所有宏块分为强边缘宏块、中等边缘宏块和弱边缘 宏块三类步骤：
f)对深度图像中的所有宏块，根据宏块的边缘强度值从大到小排序，把前 20％的宏块分类为强边缘宏块，把中间60％的宏块分类为中等边缘宏块，把最 后20％的宏块分类为弱边缘宏块。
4.根据权利要求1所述的一种立体电视系统中深度图像的编码方法，其特征 在于所述的对强边缘宏块设置较小量化参数，对中等边缘宏块设置中等量化参 数，对弱边缘宏块设置较大量化参数步骤：
g)设置强边缘宏块的量化参数为QP_Base-5，设置中等边缘宏块的量化参 数为QP_Base，设置弱边缘宏块的量化参数为QP_Base+5；
其中，i是当前宏块的序列号，QP_MB(i)是根据宏块分类信息设置的宏块的 量化参数，QP_Base是用户设置的基本量化参数。
5.根据权利要求1所述的一种立体电视系统中深度图像的编码方法，其特征 在于所述的根据设置的量化参数对深度图像中的所有宏块，运用视频编码技术 对深度图像进行编码步骤：
h)对深度图像中的每个宏块，首先进行帧内预测或者帧间预测，然后根据 步骤3)中设置的量化参数对预测残差进行量化，宏块的量化参数越小，量化时 所采用的量化步长越小，量化误差越小。
技术领域
本发明涉及数字图像处理技术，特别地，涉及一种立体电视系统中深度图 像的编码方法
背景技术
立体电视系统用户端的设计应该满足复杂度低、功能实现简单、制造成本 低的要求。由于用户端的计算能力、存储能力有限，在用户端应该选择低计算 量、低存储容量的自由视点图像绘制算法。欧洲的先进立体电视系统技术 (ATTEST)计划提出了基于深度相机的立体场景生成方法，并以此为基础设计 了立体电视系统。在该立体电视系统中，编码端将压缩后的深度图像传送给用 户端，用户端用接收到的图像信息进行自由视点图像绘制。
在基于深度图像的立体电视系统中，深度图像的边缘信息直接关系到用户 端自由视点图像绘制的质量。然而，目前已有的立体电视系统是直接采用通用 的视频编码技术对深度图像进行压缩，不能有效保护深度图像的边缘信息。本发 明提出了一种针对深度图像的编码方法，可以有效地保护深度图像中的边缘信 息，从而提高用户端自由视点图像绘制的质量。
发明内容
包括如下步骤：
1)计算深度图像中每个像素点的边缘强度值，然后根据象素点的边缘强度值 计算每个宏块的边缘强度值；
2)把深度图像中的所有宏块分为强边缘宏块、中等边缘宏块和弱边缘宏块三 类；
3)对强边缘宏块设置较小量化参数，对中等边缘宏块设置中等量化参数， 对弱边缘宏块设置较大量化参数；
4)根据设置的量化参数对深度图像中的所有宏块，运用视频编码技术对深 度图像进行编码。
所述的计算深度图像中每个像素点的边缘强度值，然后根据象素点的边缘 强度值计算每个宏块的边缘强度值步骤：
a)对深度图像中每个像素点，根据下列式子，在3×3临域中选择九个相关 亮度值：
Z1＝p(clipX(x-1)，clipY(y-1))；Z2＝p(clipX(x)，clipY(y-1))；
Z3＝p(clipX(x+1)，clipY(y-1))；Z4＝p(clipX(x-1)，clipY(y))；
Z5＝p(clipX(x)，clipY(y))；Z6＝p(clipX(x+1)，clipY(y))；
Z7＝p(clipX(x-1)，clipY(y+1))；Z8＝p(clipX(x)，clipY(y+1))；
Z9＝p(clipX(x+1)，clipY(y+1))；
clipX(x)＝min(Width-1，max(0，x))；clipY(y)＝min(Hight-1，max(0，y))；
其中，p(x，y)是深度图像中坐标(x，y)处的像素点的亮度值；clipX(x)和clipY(x) 分别是x方向和y方向的修剪函数；Width和Hight分别为深度图像的宽度和高 度；Z1、Z2、Z3、Z4、Z5、Z6、Z7、Z8和Z9是九个相关亮度值。
b)根据下式计算像素点在x方向的梯度：
G_X(x，y)＝(Z7+2*Z8+Z9)-(Z1+2*Z2+Z3)；
其中，G_X(x，y)是坐标(x，y)处像素点在x方向的梯度；
c)根据下式计算像素点在y方向的梯度：
G_Y(x，y)＝(Z3+2*Z6+Z9)-(Z1+2*Z4+Z7)；
其中，G_Y(x，y)是坐标(x，y)处像素点在y方向的梯度；
d)根据下式计算像素点的边缘强度值：
G_Pixel＝|G_X(x，y)|+|G_Y(x，y)|；
其中，G_X(x，y)是坐标(x，y)处像素点在x方向的梯度，G_Y(x，y)是坐标(x，y) 处像素点在y方向的梯度，G_Pixel(x，y)是坐标(x，y)处像素点的边缘强度值；
e)根据下式计算每个宏块的边缘强度值：
其中，i是当前宏块的序列号，(MB_x，MB_y)是当前宏块中左上角像素在深 度图像中的坐标，G_Pixel(x，y)是坐标(x，y)处像素点的边缘强度值，G_MB(i)是 当前宏块的的边缘强度值；
所述的把深度图像中的所有宏块分为强边缘宏块、中等边缘宏块和弱边缘 宏块三类步骤：
f)对深度图像中的所有宏块，根据宏块的边缘强度值从大到小排序，把前 20％的宏块分类为强边缘宏块，把中间60％的宏块分类为中等边缘宏块，把最 后20％的宏块分类为弱边缘宏块。
所述的对强边缘宏块设置较小量化参数，对中等边缘宏块设置中等量化参 数，对弱边缘宏块设置较大量化参数步骤：
g)设置强边缘宏块的量化参数为QP_Base-5，设置中等边缘宏块的量化参 数为QP_Base，设置弱边缘宏块的量化参数为QP_Base+5；
其中，i是当前宏块的序列号，QP_MB(i)是根据宏块分类信息设置的宏块的 量化参数，QP_Base是用户设置的基本量化参数。
所述的根据设置的量化参数对深度图像中的所有宏块，运用视频编码技术 对深度图像进行编码步骤：
h)对深度图像中的每个宏块，首先进行帧内预测或者帧间预测，然后根据 步骤3)中设置的量化参数对预测残差进行量化，宏块的量化参数越小，量化时 所采用的量化步长越小，量化误差越小。
编码端压缩深度图像时所引入的误差会严重影响自由视点图像绘制的质 量，尤其是在深度图像的边缘附近会产生明显的变形，影响视觉效果，因此需 要把深度图像的边缘信息做为关键信息来重点保护，以降低自由视点图像绘制 中物体轮廓的变形。
本发明首先计算深度图像中每个宏块的边缘强度，然后根据宏块的边缘强 度进行分类，最后对不同类别的宏块用不同的量化参数进行编码。对边缘强度 较强的宏块，设置较小的量化参数，提高该宏块的编码质量；对边缘强度较弱 的宏块，设置较大的量化参数，提高该宏块压缩比，减少编码该宏块时所需要 的码流；本发明可以有效保护深度图像边缘信息的方法，提高用户端自由视点 图像绘制的质量。
附图说明
图1是立体电视系统中深度图像的编码方法结构示意图；
图2是本发明的相关像素位置示意图。
具体实施方式
步骤1，计算深度图像中每个像素点的边缘强度值，然后根据象素点的边缘 强度值计算每个宏块的边缘强度值；
a)对深度图像中每个像素点，根据下列式子，在3×3临域中选择九个相关 亮度值：
Z1＝p(clipX(x-1)，clipY(y-1))；Z2＝p(clipX(x)，clipY(y-1))；
Z3＝p(clipX(x+1)，clipY(y-1))；Z4＝p(clipX(x-1)，clipY(y))；
Z5＝p(clipX(x)，clipY(y))； Z6＝p(clipX(x+1)，clipY(y))；
Z7＝p(clipX(x-1)，clipY(y+1))；Z8＝p(clipX(x)，clipY(y+1))；
Z9＝p(clipX(x+1)，clipY(y+1))；
clipX(x)＝min(Width-1，max(0，x))；clipY(y)＝min(Hight-1，max(0，y))；
其中，p(x，y)是深度图像中坐标(x，y)处的像素点的亮度值；clipX(x)和clipY(x) 分别是x方向和y方向的修剪函数；Width和Hight分别为深度图像的宽度和高 度；Z1、Z2、Z3、Z4、Z5、Z6、Z7、Z8和Z9是九个相关亮度值。
如图2所示，Z5是当前像素的像素值；Z1、Z2和Z3分别为当前像素左上方像 素、正上方像素和右上方像素的像素值；Z4和Z6分别是当前像素左方像素和右 方像素的像素值；Z7、Z8和Z9分别为当前像素左下方像素、正下方像素和右下 方像素的像素值；
b)根据下式计算像素点在x方向的梯度：
G_X(x，y)＝(Z7+2*Z8+Z9)-(Z1+2*Z2+Z3)；
其中，G_X(x，y)是坐标(x，y)处像素点在x方向的梯度；
c)根据下式计算像素点在y方向的梯度：
G_Y(x，y)＝(Z3+2*Z6+Z9)-(Z1+2*Z4+Z7)；
其中，G_Y(x，y)是坐标(x，y)处像素点在y方向的梯度；
d)根据下式计算像素点的边缘强度值：
G_Pixel＝|G_X(x，y)|+|G_Y(x，y)|；
其中，G_X(x，y)是坐标(x，y)处像素点在x方向的梯度，G_Y(x，y)是坐标(x，y) 处像素点在y方向的梯度，G_Pixel(x，y)是坐标(x，y)处像素点的边缘强度值；
e)根据下式计算每个宏块的边缘强度值：
其中，i是当前宏块的序列号，(MB_x，MB_y)是当前宏块中左上角像素在深 度图像中的坐标，G_Pixel(x，y)是坐标(x，y)处像素点的边缘强度值，G_MB(i)是 当前宏块的的边缘强度值；
步骤2，把深度图像中的所有宏块分为强边缘宏块、中等边缘宏块和弱边缘 宏块三类；
f)对深度图像中的所有宏块，根据宏块的边缘强度值从大到小排序，把前 20％的宏块分类为强边缘宏块，把中间60％的宏块分类为中等边缘宏块，把最 后20％的宏块分类为弱边缘宏块。
步骤3，把深度图像中的所有宏块分为强边缘宏块、中等边缘宏块和弱边缘 宏块三类；
g)设置强边缘宏块的量化参数为QP_Base-5，设置中等边缘宏块的量化参 数为QP_Base，设置弱边缘宏块的量化参数为QP_Base+5；
其中，i是当前宏块的序列号，QP_MB(i)是根据宏块分类信息设置的宏块的 量化参数，QP_Base是用户设置的基本量化参数。
用户设置的宏块的基本量化参数QP_Base越大，所得到的压缩图像的压缩率 越高，码流越小，图像质量越差；基本量化参数越小，所得到的压缩图像的压 缩率越低，码流越大，图像质量越高。
步骤4，把深度图像中的所有宏块分为强边缘宏块、中等边缘宏块和弱边缘 宏块三类。
h)对深度图像中的每个宏块，首先进行帧内预测或者帧间预测，然后根据 步骤3)中设置的量化参数对预测残差进行量化，宏块的量化参数越小，量化时 所采用的量化步长越小，量化误差越小。
| 标题 | 发布/更新时间 | 阅读量 |
|---|---|---|
| 基于频谱地图的卫星通信系统用户链路干扰规避方法 | 2020-05-08 | 262 |
| 编码和解码图像的方法及使用该方法的设备 | 2020-05-08 | 130 |
| 一种基于块编码特性的3D视频错误隐藏方法 | 2020-05-08 | 55 |
| 一种早教机器人的控制方法 | 2020-05-08 | 259 |
| 目标跟踪方法及存储介质 | 2020-05-08 | 545 |
| 图像编码装置 | 2020-05-08 | 236 |
| 基于视觉显著性的HEVC优化算法 | 2020-05-08 | 55 |
| 瓣膜图像处理方法、瓣膜图像处理装置及电子设备 | 2020-05-08 | 644 |
| 一种编解码方法、装置及其设备 | 2020-05-11 | 480 |
| 编码方法、解码方法、编码设备和解码设备 | 2020-05-08 | 984 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台，是提供专利分析，专利查询，专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据，免费查、免费专利分析。
专利汇分析报告产品可以对行业情报数据进行梳理分析，涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度，系统通过AI智能系统对图表进行解读，只需1分钟，一键生成行业专利分析报告。
