首页 / 专利库 / 电脑图像 / 像素 / 带宽压缩中复杂纹理的双模式选择预测方法

带宽压缩中复杂纹理的双模式选择预测方法

阅读:372发布:2020-05-08

专利汇可以提供带宽压缩中复杂纹理的双模式选择预测方法专利检索,专利查询,专利分析的服务。并且本 发明 涉及一种带宽压缩中复杂纹理的双模式选择预测方法,包括:将待编码视频图像划分成多个宏 块 ,并确定待编码 像素 分量;采用等距 采样 预测方法,确定当前编码宏块中的采样像素和非采样像素的第一参考像素,计算得到一组第一预测残差;采用自适应十字窗口预测方法,在十字形窗口内选择当前编码宏块中每个当前编码像素的第二参考像素,计算得到一组第二预测残差;根据一组第一预测残差计算第一绝对残差和,根据一组第二预测残差计算第二绝对残差和;比较第一绝对残差和与第二绝对残差和,确定当前编码宏块的最优预测方法,得到一组最优预测残差。本发明以宏块为预测单元,根据图像不同区域纹理特征的不同,自适应选择最优预测方法,预测效果更优。,下面是带宽压缩中复杂纹理的双模式选择预测方法专利的具体信息内容。

1.一种带宽压缩中复杂纹理的双模式选择预测方法,其特征在于,包括:
将待编码视频图像划分成多个宏,并确定待编码像素分量;
采用等距采样预测方法,确定当前编码宏块中的采样像素和非采样像素的第一参考像素,计算得到一组第一预测残差;
采用自适应十字窗口预测方法,在十字形窗口内选择所述当前编码宏块中每个当前编码像素的第二参考像素,计算得到一组第二预测残差;
根据所述一组第一预测残差计算第一绝对残差和,根据所述一组第二预测残差计算第二绝对残差和;
比较所述第一绝对残差和与所述第二绝对残差和,确定所述当前编码宏块的最优预测方法,得到一组最优预测残差。
2.根据权利要求1所述的方法,其特征在于,所述采用等距采样预测方法,确定当前编码宏块中的采样像素和非采样像素的第一参考像素,计算得到一组第一预测残差的步骤包括:
设定多种等距采样模式,根据不同的采样间隔对所述当前编码宏块中的像素的待编码像素分量的重建值进行采样;
确定每一种等距采样模式下当前编码宏块中的每个所述采样像素和每个所述非采样像素的参考像素,计算得到每一种等距采样模式下的一组采样预测残差;
根据每一种等距采样模式下的一组采样预测残差,计算每一种等距采样模式下的采样绝对残差和;
比较所述多种等距采样模式下的多个所述采样绝对残差和,选择最小的采样绝对残差和对应的等距采样模式作为最优等距采样模式,对应的一组采样预测残差作为当前编码宏块的一组第一预测残差,对应的一组参考像素作为当前编码宏块的一组第一参考像素。
3.根据权利要求2所述的方法,其特征在于,所述设定多种等距采样模式,根据不同的采样间隔对所述当前编码宏块中的像素的待编码像素分量的重建值进行采样的步骤包括:
从当前编码宏块中的第一个像素开始,按照所述采样间隔采集所述采样像素的待编码像素分量的重建值,所述采样像素包括当前编码宏块的最后一个像素。
4.根据权利要求2所述的方法,其特征在于,所述确定每一种等距采样模式下当前编码宏块中的每个所述采样像素和每个所述非采样像素的参考像素,计算得到每一种等距采样模式下的一组采样预测残差的步骤还包括:
从所述当前编码宏块的上参考宏块中按照点对点映射选择每个所述采样像素的参考像素,计算每个所述采样像素的待编码像素分量的采样预测残差。
5.根据权利要求4所述的方法,其特征在于,所述确定每一种等距采样模式下当前编码宏块中的每个所述采样像素和每个所述非采样像素的参考像素,计算得到每一种等距采样模式下的一组采样预测残差的步骤还包括:
从所述当前编码宏块中选择所述采样像素作为每个所述非采样像素的参考像素,计算每个所述非采样像素的待编码像素分量的采样预测残差。
6.根据权利要求5所述的方法,其特征在于,每个所述非采样像素的待编码像素分量的采样预测残差的计算公式为:
其中, 表示1/T采样模式下当前编码宏块中编号为m的所述非采样像素的待编码像素分量的采样预测残差, 为当前编码宏块中编号为m的所述非采样像素的参考像素即采样像素Samplef的待编码像素分量的重建值,m≠Tf and m≠M-1,1≤T≤M,f=
0、1、2、…、F-1。
7.根据权利要求1所述的方法,其特征在于,所述采用自适应十字窗口预测方法,在十字形窗口内选择所述当前编码宏块中每个所述当前编码像素的第二参考像素,计算得到一组第二预测残差的步骤包括:
确定预测搜索窗口;
在所述预测搜索窗口内计算所述当前编码像素的权重,所述权重包括当前编码像素相对所述预测搜索窗口内的重建像素的差异度权重和位置权重;
根据所述权重确定所述当前编码像素的第二参考像素并计算第二预测残差,得到当前编码宏块的一组第二预测残差。
8.根据权利要求7所述的方法,其特征在于,在所述预测搜索窗口内计算所述当前编码像素的权重的步骤包括:
计算所述当前编码像素的每个所述像素分量相对重建像素的像素分量的分量差异度权重;
计算所述当前编码像素的每个像素分量相对重建像素的像素分量的分量位置权重;
计算所述当前编码像素相对每个所述重建像素的子权重;
所述分量差异度权重为 其中
为所述当前编码像素的待编码像素分量的原始值,
为编号为k的所述重建像素的待编码像素分量的重建值,ABS为绝对值运算符;
所述分量位置权重为 其中
是根据所述当前编码像素与每个所述重建像素的位置关系确定;
所述子权重为 其中, 和 分别为差异度加权值和
位置加权值, 为分量加权值;
所述权重为Wij={Wij、0,Wij、1,Wij、2,...Wij、k...,Wij、K-2}。
9.根据权利要求8所述的方法,其特征在于,所述根据所述权重确定所述当前编码像素的第二参考像素并计算第二预测残差的步骤包括:
根据最优值算法从所述权重的多个子权重中,选择出最优值,将最优值对应的重建像素作为当前编码像素的第二参考像素;
根据当前编码像素的待编码像素分量的原始值与第二参考像素的待编码像素分量的重建值计算当前编码像素的待编码像素分量的第二预测残差。

说明书全文

带宽压缩中复杂纹理的双模式选择预测方法

技术领域

[0001] 本发明涉及一种压缩技术领域,特别涉及一种带宽压缩中复杂纹理的双模式选择预测方法。

背景技术

[0002] 随着公众对视频质量需求的不断提高,视频的图像分辨率也随之成倍数的增加,由此使视频图像的数据量十分巨大,需要占用较多的存储空间和传输带宽,在这种情况下,利用芯片内的带宽压缩技术来提高图像的存储空间和传输带宽就显得尤为必要。
[0003] 带宽压缩技术的目标是用较小的逻辑面积成本,尽可能的提高压缩倍数,减少双倍速率同步动态随机存储器(Double Data Rate,简称DDR) 的占用。预测模作为带宽压
缩的一个重要模块,是利用图像相邻像素间存在的空间冗余度,根据邻近像素信息对当前
像素值进行预测,预测差值的标准差要远小于原始图像数据的标准差,因此对预测差值进
行编码,更有利于使图像数据的理论熵达到最小,从而达到提高压缩效率的目的。
[0004] 然而,当待压缩图像的纹理复杂多变时,根据固定不变的预测模式来预测待压缩图像的复杂纹理区域时,往往会造成所采用预测模式可能只适用某些区域,而对另一些区
域并不适用,从而造成这些区域的预测编码得不到精确的参考,导致理论极限熵得不到最
大化的降低,影响预测模块的预测质量。因此,在待压缩图像的纹理复杂多变时,提供一种更加灵活适用的预测方法以实现所有纹理区域的高质量预测成为亟需解决的问题。

发明内容

[0005] 因此,为解决现有技术存在的技术缺陷和不足,本发明提出一种带宽压缩中复杂纹理的双模式选择预测方法。
[0006] 具体地,本发明一个实施例提出的一种带宽压缩中复杂纹理的双模式选择预测方法,包括:
[0007] 将待编码视频图像划分成多个宏块,并确定待编码像素分量;
[0008] 采用等距采样预测方法,确定当前编码宏块中的采样像素和非采样像素的第一参考像素,计算得到一组第一预测残差;
[0009] 采用自适应十字窗口预测方法,在十字形窗口内选择当前编码宏块中每个当前编码像素的第二参考像素,计算得到一组第二预测残差;
[0010] 根据一组第一预测残差计算第一绝对残差和,根据一组第二预测残差计算第二绝对残差和;
[0011] 比较第一绝对残差和与第二绝对残差和,确定当前编码宏块的最优预测方法,得到一组最优预测残差。
[0012] 在本发明的一个实施例中,采用等距采样预测方法,确定当前编码宏块中的采样像素和非采样像素的第一参考像素,计算得到一组第一预测残差的步骤包括:
[0013] 设定多种等距采样模式,根据不同的采样间隔对当前编码宏块中的像素的待编码像素分量的重建值进行采样;
[0014] 确定每一种等距采样模式下当前编码宏块中的每个采样像素和每个非采样像素的第一参考像素,计算得到每一种等距采样模式下的一组采样预测残差;
[0015] 根据每一种等距采样模式下的一组采样预测残差,计算每一种等距采样模式下的采样绝对残差和;
[0016] 比较每一种等距采样模式下的采样绝对残差和,选择最小的采样绝对残差和对应的等距采样模式作为最优等距采样模式,对应的一组采样预测残差作为当前编码宏块的一
组第一预测残差。
[0017] 在本发明的一个实施例中,设定多种等距采样模式,根据不同的采样间隔对当前编码宏块中的像素的待编码像素分量的重建值进行采样的步骤包括:
[0018] 从当前编码宏块中的第一个像素开始,按照采样间隔采集采样像素的待编码像素分量的重建值,采样像素包括当前编码宏块的最后一个像素。
[0019] 在本发明的一个实施例中,确定每一种等距采样模式下当前编码宏块中的每个采样像素和每个非采样像素的参考像素,计算得到每一种等距采样模式下的一组采样预测残
差的步骤还包括:
[0020] 从当前编码宏块的上参考宏块中按照点对点映射选择每个采样像素的参考像素,计算每个采样像素的待编码像素分量的采样预测残差。
[0021] 在本发明的一个实施例中,确定每一种等距采样模式下当前编码宏块中的每个采样像素和每个非采样像素的参考像素,计算得到每一种等距采样模式下的一组采样预测残
差的步骤还包括:
[0022] 从当前编码宏块中选择采样像素作为每个非采样像素的参考像素,计算每个非采样像素的待编码像素分量的采样预测残差。
[0023] 在本发明的一个实施例中,每个非采样像素的待编码像素分量的采样预测残差的计算公式为:
[0024]
[0025] 其中, 表示1/T采样模式下当前编码宏块中编号为m的非采样像素的待编码像素分量的采样预测残差, 为当前编码宏块中编号为m的非采样像素的参考像
素即采样像素Samplef的待编码像素分量的重建值,m≠Tf and m≠M-1,1≤T≤M,f=0、1、
2、…、F-1。
[0026] 在本发明的一个实施例中,采用自适应十字窗口预测方法,在十字形窗口内选择当前编码宏块中每个当前编码像素的第二参考像素,计算得到一组第二预测残差的步骤包
括:
[0027] 确定预测搜索窗口;
[0028] 在预测搜索窗口内计算当前编码像素的权重,权重包括当前编码像素相对预测搜索窗口内的重建像素的差异度权重和位置权重;
[0029] 根据权重确定当前编码像素的第二参考像素并计算第二预测残差,得到当前编码宏块的一组第二预测残差。
[0030] 在本发明的一个实施例中,在预测搜索窗口内计算当前编码像素的权重的步骤包括:
[0031] 计算当前编码像素的每个像素分量相对重建像素的像素分量的分量差异度权重;
[0032] 计算当前编码像素的每个像素分量相对重建像素的像素分量的分量位置权重;
[0033] 计算当前编码像素相对每个重建像素的子权重;
[0034] 分量差异度权重为 其中为当前编码像素的待编码像素分量的原始值, 为编
号为k的重建像素的待编码像素分量的重建值,ABS为绝对值运算符;
[0035] 分量位置权重为 其中是根据当前编码像素与每个重建像素的位置关系确定;
[0036] 子权重为 其中, 和 分别为差异度加权值和位置加权值, 为分量加权值;
[0037] 权重为Wij={Wij、0,Wij、1,Wij、2,...Wij、k...,Wij、K-2}。
[0038] 在本发明的一个实施例中,根据权重确定当前编码像素的第二参考像素并计算第二预测残差的步骤包括:
[0039] 根据最优值算法从权重的多个子权重中,选择出最优值,将最优值对应的重建像素作为当前编码像素的第二参考像素;
[0040] 根据当前编码像素的待编码像素分量的原始值与第二参考像素的待编码像素分量的重建值计算当前编码像素的待编码像素分量的第二预测残差。
[0041] 基于此,本发明具备如下优点:
[0042] 本发明实施例的带宽压缩中复杂纹理的双模式选择预测方法,采用了两种不同的预测方法,以宏块为预测单元,通过比较两种不同的预测方法得到的预测残差,选择针对该宏块的最优预测方法进行预测残差的计算,对于复杂纹理图像,可根据图像不同区域纹理
特征的不同,自适应地选择最优的预测方法,预测效果更优,进一步降低了理论极限熵。
[0043] 通过以下参考附图的详细说明,本发明的其它方面和特征变得明显。但是应当知道,该附图仅仅为解释的目的设计,而不是作为本发明的范围的限定,这是因为其应当参考附加的权利要求。还应当知道,除非另外指出,不必要依比例绘制附图,它们仅仅图概念地说明此处描述的结构和流程。

附图说明

[0044] 下面将结合附图,对本发明的具体实施方式进行详细的说明。
[0045] 图1为本发明实施例提供的带宽压缩中复杂纹理的双模式选择预测方法的流程图。
[0046] 图2为本发明实施例提供的等距采样预测方法的流程图
[0047] 图3为本发明实施例提供的对当前编码宏块进行等距采样的5种等距采样模式示意图。
[0048] 图4为本发明实施例提供的计算当前编码宏块中像素的待编码像素分量的预测残差的流程图。
[0049] 图5为本发明实施例提供的1/4采样模式下确定当前编码宏块中采样像素和非采样像素的参考像素示意图。
[0050] 图6为本发明实施例提供的自适应十字窗口预测方法的流程图。
[0051] 图7为本发明实施例提供的十字预测搜索窗口的像素索引示意图。
[0052] 图8为本发明实施例提供的十字预测搜索窗口的重建像素搜索编号示意图。
[0053] 图9(a)和图9(b)为本发明实施例提供的另一种十字预测搜索窗口的像素索引示意图和重建像素搜索编号示意图。
[0054] 图10为本发明实施例提供的权重的计算方法流程图。
[0055] 图11为本发明实施例提供的十字预测搜索窗口中位置子权重的示意图。

具体实施方式

[0056] 为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图对本发明的具体实施方式做详细的说明。
[0057] 本发明实施例的方法,通过采用两种不同的预测方法比较得到的预测残差,针对图像中不同宏块自适应地选择最优预测方法进行预测残差的计算。
[0058] 实施例一
[0059] 参见图1,图1为本发明实施例提供的带宽压缩中复杂纹理的双模式选择预测方法的流程图。该双模式选择预测方法包括如下步骤:
[0060] S1、将待编码视频图像划分成多个宏块,并确定待编码像素分量。
[0061] 在本发明的一个实施例中,将待编码视频图像划分为X个相同的宏块 MBx,编码前,将对该X个宏块逐一进行编码预测。每个宏块包含M个像素,M≥4,例如M=8×1或M=16×1或M=32×1或M=64×1。对第x个宏块MBx中的M个像素进行顺序编号为0、1、2、...m...、M-1。优选地,每个宏块包含16×1个像素,第x1个宏块MBx中的16个像素进行顺序编号为 0、
1、2、...m...、16。设定待编码视频图像的每个像素包含N个像素分量,待编码像素分量为第n个像素分量。例如待编码视频图像的每个像素包含3个像素分量R G B,或包括4个像素分
量R G B W,或包含3个像素分量YUV,或包含4个像素分量C M Y K。
[0062] S2、采用等距采样预测方法,确定当前编码宏块中的采样像素和非采样像素的第一参考像素,计算得到一组第一预测残差,并计算第一绝对残差和。
[0063] S3、采用自适应十字窗口预测方法,在十字形窗口内选择当前编码宏块中当前编码像素的第二参考像素,计算得到一组第二预测残差,并计算第二绝对残差和。
[0064] S4、根据一组第一预测残差计算第一绝对残差和,根据一组第二预测残差计算第二绝对残差和。
[0065] S5、比较第一绝对残差和与第二绝对残差和,确定当前编码宏块的最优预测方法,得到一组最优预测残差。
[0066] 实施例二
[0067] 参见图2,图2为本发明实施例提供的等距采样预测方法的流程图。本发明实施例的等距采样预测方法,通过对当前编码宏块中的部分像素即采样像素的重建值进行采集,
在当前编码宏块外部选择参考像素计算采样像素的预测残差,并在当前编码宏块内部选择
采样像素作为参考像素,估算非采样像素的预测残差。本发明实施例在实施例一的基础上,步骤S2还包括以下步骤:
[0068] S21、设定多种等距采样模式,根据不同的采样间隔对当前编码宏块中的像素的待编码像素分量的重建值进行采样,得到每一种等距采样模式下当前编码宏块的一组采样像
素的待编码像素分量的重建值。
[0069] 由于宏块中存在纹理,宏块中两个像素之间的距离越近,则纹理渐变的一致性概率越高,反之宏块中两个像素之间的距离越远,则纹理渐变的一致性概率越低。根据宏块中存在的这种纹理相关性,需要从多种采样模式中选择合适的采样模式,即以合适的采样间
隔T对宏块中的M个像素的待编码像素分量进行采样。因此,宏块中的M个像素包括采样像素和非采样像素。
[0070] 在本发明的一个实施例中,采用的是等距采样模式,采样间隔为T个像素,称之为1/T采样模式,且1≤T≤M。以1/T采样模式对当前编码宏块MBx中M个像素的待编码像素分量的重建值进行采样时,从编号为0的像素即第1个像素开始,按照采样间隔T进行采样。并设定任意等距采样模式下,均对当前编码宏块MBx中的最后一个像素的待编码像素分量的重
建值进行采集。因此,最后一个采样区间内包含两个采样像素为第一个像素和最后一个像
素,其余采样区间均包含1个采样像素为第1个像素。因此,当T=1时,即全采样模式下,共采集M个重建值;当T>1时,共采集M/T+1 个重建值。
[0071] 参见图3,图3为本发明实施例提供的对当前编码宏块进行等距采样的 5种等距采样模式示意图。在本发明的一个实施例中,设定5种等距采样模式对当前编码宏块MBx进行
采样,分别对应的采样间隔为T=1、T=2、T=4、 T=8、T=16,即全采样模式、1/2采样模式、
1/4采样模式、1/8采样模式、 1/16采样模式。当M=16×1,即当前编码宏块MBx包含16个像素时,按照这5种等距采样模式对当前编码宏块MBx中的M个像素的重建值进行采样的方法
具体为:
[0072] (一)、全采样,采集当前编码宏块MBx中编号为0到15的16个像素的待编码像素分量的重建值;
[0073] (二)、1/2采样,采集当前编码宏块MBx中编号为0、2、4、6、8、10、 12、14、15的共9个像素的待编码像素分量的重建值,则这9个像素为采样像素,其余6个像素为非采样像素;
[0074] (三)、1/4采样,采集当前编码宏块MBx中编号为0、4、8、12、15的共5个像素的待编码像素分量的重建值,则这5个像素为采样像素,其余 11个像素为非采样像素;
[0075] (四)、1/8采样,采集当前编码宏块MBx中编号为0、8、15的共3个像素的待编码像素分量的重建值,则这3个像素为采样像素,其余13个像素为非采样像素;
[0076] (五)、1/16采样,采集当前编码宏块MBx中编号为0、15的共2个像素的待编码像素分量的重建值,则这2个像素为采样像素,其余14个像素为非采样像素。
[0077] S22、确定每一种等距采样模式下当前编码宏块中的每个采样像素和每个非采样像素的参考像素,计算每个采样像素和每个非采样像素的待编码像素分量的采样预测残
差,得到每一种等距采样模式下的一组采样预测残差。
[0078] 在本发明的一个实施例中,1/T采样模式下,当前编码宏块MBx包含 F=M/T个采样区间,对F个采样区间顺序编号为0、1、2、...f...、F-1,每个采样区间包含T个像素,其中包含1个采样像素和T-1个非采样像素。则当前编码宏块MBx共包含F+1=M/T+1个采样像素为
[0079] {Sample0、Sample1、Sample2、…、Samplef、…、SampleF}
[0080] 其中,Samplef表示编号为f的采样区间内的采样像素。在编号为f的采样区间内,T-1个非采样像素为
[0081] {NoSamplef,0、NoSamplef,1、…、NoSamplef,t、…、NoSamplef,T-2}
[0082] 其中,NoSamplef,t表示编号为f的采样区间内编号为t的非采样像素。
[0083] 在本发明的一个实施例中,1/4采样模式下,当前编码宏块MBx包含 16全像素时,分为4个采样区间,对4个采样区间顺序编号为0、1、2、3,每个采样区间包含4个像素。当前编码宏块MBx包含5个采样像素为 Sample0、Sample1、Sample2、Sample3、Sample4,编号0的采样区间内的3个非采样像素为NoSample0,0、NoSample0,1、NoSample0,2。
[0084] 参见图4和图5,图4为本发明实施例提供的计算当前编码宏块中像素的待编码像素分量的预测残差的流程图;图5为本发明实施例提供的1/4 采样模式下确定当前编码宏
块中采样像素和非采样像素的参考像素示意图。对当前编码宏块MBx中的采样像素和非采
样像素,按照不同的预测方法计算其待编码像素分量的采样预测残差。具体步骤如下:
[0085] S221、从当前编码宏块MBx的上参考宏块中按照点对点映射选择每个采样像素的参考像素,计算每个采样像素的待编码像素分量的采样预测残差。
[0086] 采用点对点预测方式,在当前编码宏块MBx的上参考宏块MBx'中,选择与当前编码宏块MBx中每个采样像素Samplef编号相同的像素作为该采样像素的参考像素,计算每个采样像素的待编码像素分量的采样预测残差。上参考宏块MBx'是指在待编码视频图像中位于当前编码宏块MBx正上方相邻的宏块。则当前编码宏块MBx中每个采样像素的待编码像素分
量的采样预测残差根据如下公式(1)计算得到:
[0087]
[0088] 其中, 表示1/T采样模式下当前编码宏块MBx中编号为f 的采样区间内的采样像素Samplef的待编码像素分量的采样预测残差, 为采样像素
Samplef的待编码像素分量的重建值, 为采样像素Samplef的参考像素的待编码
像素分量的重建值。
[0089] 编号为f的采样区间内的采样像素Samplef,在当前编码宏块MBx中的编号为m=Tf,即 将公式(1)转化为如下公式(2):
[0090]
[0091] 其中, 表示1/T采样模式下当前编码宏块MBx中编号为m的采样像素的待编码像素分量的采样预测残差, 为采样像素Samplef的待编码像素分量的重建值,
为位于上参考宏块MBx'中的参考像素的待编码像素分量的重建值。此处, m=Tf 
or m=M-1,1≤T≤M,f=0、1、2、…、F-1。
[0092] S222、从当前编码宏块MBx中选择采样像素作为每个非采样像素的参考像素,计算每个非采样像素的待编码像素分量的采样预测残差。
[0093] 在采样间隔为T的等距采样模式下,从当前编码宏块MBx中选择采样像素作为每个非采样像素的参考像素,即在每个采样区间内,将采样像素 Samplef作为每个非采样像素
NoSamplef,t的参考像素,计算每个非采样像素的待编码像素分量的采样预测残差。
[0094] (一)、对于前F-1个采样区间,在每个采样区间内,每个非采样像素 NoSamplef,t的待编码像素分量的采样预测残差的计算公式如下公式(3):
[0095]
[0096] 其中, 表示1/T采样模式下当前编码宏块MBx中编号为f的采样区间内编号为t的非采样像素的待编码像素分量的采样预测残差。 为当前编码宏块
MBx中编号为f的采样区间内的采样像素 Samplef的重建值,f=0、1、2、…、F-2,且t≥1。
[0097] 因为 其中 表示对 的值向下取整,则
[0098] 将 代入公式(3)得
[0099]
[0100] 其中, 表示1/T采样模式下当前编码宏块MBx中编号为m的非采样像素的待编码像素分量的采样预测残差, 为当前编码宏块 MBx中编号为m的非采样像素的
参考像素即采样像素Samplef的待编码像素分量的重建值。此处,m≠Tf,f=0、1、2、…、F-2。
[0101] (二)、对于最后一个采样区间,其包含两个采样像素为SampleF-1和 SampleF,每个非采样像素NoSamplef,t的待编码像素分量的采样预测残差的计算公式如下公式(5):
[0102]
[0103] 即
[0104] 其中, 表示1/T采样模式下当前编码宏块MBx中编号为m的非采样像素的待编码像素分量的采样预测残差, 为当前编码宏块 MBx中编号为m的非采样像素的
参考像素即采样像素Samplef的待编码像素分量的重建值, 为当前编码宏块MBx中最
后一个采样像素的SampleF的待编码像素分量的重建值。此处,m≠Tf,f=F-1。
[0105] 根据如上公式(2)、公式(4)和公式(6),1/T采样模式下当前编码宏块MBx中所有像素的待编码像素分量的采样预测残差计算公式如下:
[0106]
[0107] S23、根据每一种等距采样模式下得到的一组采样预测残差,计算每一种等距采样模式下的采样绝对残差和。
[0108] 根据公式(7),采样间隔为T的等距采样模式下,得到当前编码宏块MBx的一组采样预测残差为
[0109]
[0110] 则采样绝对残差和如下公式(8)计算得到:
[0111]
[0112] 在本发明的一个实施例中,当前编码宏块MBx包含16个像素,分别采用全采样模式、1/2采样模式、1/4采样模式、1/8采样模式、1/16采样模式对当前编码宏块MBx中的M个像素的重建值进行采样并计算每个像素的待编码像素分量的采样预测残差。根据公式(7),对T取值分别为 T=1、 时,对于每个像素得到对应的五个采样
预测残差分别为
[0113]
[0114] 则对于当前编码宏块MBx得到五组采样预测残差,根据公式(8)得到五个采样绝对残差和分别为
[0115]
[0116] S24、比较每一种等距采样模式下的采样绝对残差和,选择最小的采样绝对残差和对应的等距采样模式作为最优等距采样模式,对应的一组参考像素作为当前编码宏块MBx
的一组第一参考像素,对应的一组采样预测残差作为当前编码宏块MBx的一组第一预测残

[0117] 具体为,比较步骤S23中得到的多个采样绝对残差和 如设定其中最小采样绝对残差
和例如 对应的等距采样模式作为当前编码宏块MBx的最优等距采样模式,将根
据该最优等距采样模式计算得到的一组采样预测残差 作为当前编码宏块MBx的
一组第一预测残差 对应的一组参考像素作为当前编码宏块的一组第一参考像素。
[0118] 本发明实施例的等距采样预测方法预设多种采样模式及对应采样像素和非采样像素的参考像素的选择方式,通过比较不同采样模式下得到的宏块的预测残差的采样绝对
残差和,进而选择出最优的采样模式对当前宏块进行采样并计算预测残差。与现有方法相
比,当待压缩图像的纹理较为复杂时,对处于图像的纹理边界处的宏块,因为存在纹理的渐变,可以使当前宏块最大限度不依赖于周围宏块,而是根据当前宏块自身的纹理特性获得
预测残差,从而避免因周围宏块与当前宏块相关性较差而不能获取较小的预测残差,能够
提高对复杂纹理区域求预测残差值的精度,进一步降低理论极限熵,增大带宽压缩率。
[0119] 实施例三
[0120] 参见图6,图6为本发明实施例提供的自适应十字窗口预测方法的流程图。本发明实施例在实施例一或实施例二的基础上,步骤S3还包括以下步骤:
[0121] S31、确定十字形预测搜索窗口
[0122] 参见图7,图7为本发明实施例提供的十字预测搜索窗口的像素索引示意图。在待编码视频图像像素区域内,用Cij代表当前编码像素,Pij代表已编码的重建像素。其中,ij为当前编码像素或重建像素的位置索引。设定一个滑动窗口作为预测搜索窗口,预测搜索窗
口的形状可以为平条形、垂直条形、L形、十字形、丁字形、矩形或其他不规则形状。预测搜索窗口的大小根据视频图像的纹理特征及预测精度的需求进行确定,对于纹理比较细或对
预测精度需求较低的视频图像,可设置较小的预测搜索窗口,对于纹理比较粗或对预测精
度需求较高的视频图像,可设置较大的预测搜索窗口。
[0123] 在本发明的一个实施例中,预测搜索窗口的形状为十字形,大小为包含K个像素。该十字形预测搜索窗口的上部、下部、左边和右边包含的像素数目可以相等,也可以不相
等。当前编码像素Cij可设定位于该十字形预测搜索窗口内,也可以设定位于该十字形预测搜索窗口外。当前编码像素Cij可设定位于该十字形预测搜索窗口水平方向的右端,也可以设定位于该十字形预测搜索窗口垂直方向的下端。优选地,当前编码像素Cij位于该十字形预测搜索窗口内的最下端位置。预测搜索窗口内的其他位置为已编码的 K-1个重建像素
Pi,j-1、Pi,j-2、Pi,j-3、...Pi-1,j-3、Pi-2,j-3、...Pi+1,j-3、Pi+2,j-3、...。在对当前编码像素Cij进行编码预测时,根据K-1个重建像素的重建值来预测当前编码像素Cij的第二预测残差。
[0124] 参见图8,图8为本发明实施例提供的十字预测搜索窗口的重建像素搜索编号示意图。本发明实施例中,根据K-1个重建像素的重建值来预测当前编码像素Cij的重建值时,对十字形窗口内的K-1个重建像素进行顺序编号为0、1、2、...k...、K-2,按照编号对重建像素P0、P1、P2、...Pk...、PK-2进行顺序搜索,先从左至右搜索水平方向的所有重建像素,再从上至下搜索竖直方向的所有重建像素。或者先搜索竖直方向的,再搜索水平方向的。例如,本发明实施例的十字形预测搜索窗口内包含12个重建像素,水平方向从左至右、竖直方向从
上至下,对12个重建像素进行编号,从0编号至 11,对该12个重建像素P0、P1、P2、...、P11从编号为0的重建像素P0开始搜索,直至搜索到编号为11的重建像素P11,寻找当前编码像素Cij的第二参考像素,计算第二预测残差。
[0125] 参见图9,图9(a)和图9(b)为本发明实施例提供的另一种十字预测搜索窗口的像素索引示意图和重建像素搜索编号示意图。该十字形预测搜索窗口内包含4个重建像素,水平方向从左至右、竖直方向从上至下,对4 个重建像素进行编号,从0编号至3,对该4个重建像素P0、P1、P2、P3从编号为0的重建像素P0开始搜索,直至搜索到编号为3的重建像素P3,寻找当前编码像素Cij的第二参考像素,计算预测残差。该十字形预测搜索窗口内包含最少像素数,进一步节约传输的附加比特数。
[0126] 当前编码像素Cij的第二预测残差计算方法如下述步骤描述。
[0127] S32、在十字形预测搜索窗口内计算当前编码像素Cij的权重Wij。
[0128] 对应K-1个已编码的重建像素P0、P1、P2、...Pk...、PK-2,权重Wij包括K-1 个子权重,即
[0129] Wij={Wij、0,Wij、1,Wij、2,...Wij、k...,Wij、K-2}
[0130] 其中,Wij、k为当前编码像素Cij对应已编码的重建像素Pk的子权重。子权重Wij、k为当前编码像素Cij的N个像素分量 相对重建像素 Pk的N个像素分量的N个分量子权重 加权求和的结果,即
[0131]
[0132] 其中, 为当前编码像素Cij的待编码像素分量 相对重建像素Pk的像素分量的分量权重, 为分量加权值,且满足 在
本发明的一个实施例中, 的取值为 在本发明的
另一个实施例中,根据像素分量 分别与N个像素分量 的距离大小来确定,距离越近,则
对应的 越大;在本发明的又一个实施例中,根据经验确定 的取值。
[0133] 在本发明的一个实施例中,在预测搜索窗口内计算当前编码像素Cij的权重Wij时,权重Wij由当前编码像素的差异度权重DIFij和位置权重POSij共同确定。对应K-1个已编码的重建像素P0、P1、P2、...Pk...、PK-2,差异度权重DIFij有K-1个差异度子权重DIFij、k,位置权重POSij有K-1个位置子权重POSij、k,即
[0134] DIFij={DIFij、0,DIFij、1,DIFij、2,...DIFij、k...,DIFij、K-2}
[0135] POSij={POSij、0,POSij、1,POSij、2,...POSij、k...,POSij、K-2}
[0136] 参见图10,图10为本发明实施例提供的权重的计算方法流程图,权重 Wij的确定方法包括如下步骤:
[0137] S321、计算当前编码像素的像素分量 相对重建像素的像素分量的分量差异度权重 每个像素分量 的分量差异度权重 有K-1个分量差异度子权重 即
[0138]
[0139] 其中,分量差异度子权重 根据当前编码像素Cij的像素分量 与重建像素Pk的像素分量 的差异度来确定。
[0140] 优选地,本发明实施例中,分量差异度子权重 为像素分量 的原始值与重建像素分量 的重建值 的差值的绝对值,即
[0141]
[0142] S322、计算当前编码像素的像素分量 相对重建像素的像素分量的分量位置权重每个像素分量 的分量位置权重 有K-1个分量位置子权重 即
[0143]
[0144] 其中,分量位置子权重 根据当前编码像素Cij与重建像素Pk的位置关系来确定。
[0145] 参见图11,图11为本发明实施例提供的十字预测搜索窗口中位置子权重的示意图。本发明实施例中,以当前编码像素Cij与重建像素Pk相间隔的像素数作为分量位置子权重 对应预测搜索窗口中的K-1个重建像素 P0、P1、P2、...Pk...、PK-2,例如与当前编
码像素Cij相邻的重建像素P11与Cij间隔像素数为0,则确定对应分量位置子权重为
重建像素P10与Cij间隔像素数为1,则确定对应分量位置子权重为
同理,对应共12 个重建像素P0、P1、P2、...Pk...、PK-2的12个分量位置子权重为:
[0146]
[0147]
[0148]
[0149]
[0150]
[0151]
[0152] S323、计算当前编码像素的像素分量 相对重建像素的像素分量的分量权重每个像素分量 的分量权重 有K-1个分量子权重 即
[0153]
[0154] 其中,分量子权重为 其中, 和 分别为差异度加权值和位置加权值,且满足 在本发明的一个实施例中,取 在本
发明的另一个实施例中,根据 的大小确定对应 的值, 越大,则 越小;根据
的大小确定 的值, 越大,则 越小。在本发明的又一个实施例中, 和 的
值根据经验值确定。
[0155] S324、计算当前编码像素Cij相对每一个重建像素Pk的子权重Wij、k。当前编码像素Cij相对重建像素Pk的子权重Wij、k为当前编码像素Cij的N个像素分量相对重建像素Pk的N个像素分量 的  N个分 量子权重
加权求和,即
[0156]
[0157] 其中, 为分量加权值,且满足 在本发明的一个实施例中, 的取值为 在本发明的另
一个实施例中,根据像素分量 分别与N个像素分量 的距离大小来确定,距离越近,则对
应的 越大;在本发明的又一个实施例中,根据经验确定 的取值。
[0158] S325、计算当前编码像素Cij的权重,则权重为
[0159]
[0160] S33、根据权重Wij确定当前编码像素Cij的第二参考像素并计算第二预测残差。包括如下步骤:
[0161] S331、根据权重Wij确定当前编码像素Cij的第二参考像素Ps。具体地,根据最优值算法从权重Wij的K-1个子权重Wij、k中,选择出最优值,将最优值对应的重建像素Ps作为当前编码像素Cij的第二参考像素。最优值确定算法比如是最小权重确定算法,即从权重Wij={Wij、0,Wij、1,Wij、2,...Wij、k...,Wij、K-2}的 K-1个子权重中,选择出子权重最小值如Wij、s对应的重建像素Ps,将重建像素Ps作为当前编码像素Cij的第二参考像素。
[0162] S332、计算当前编码像素Cij的第二预测残差 具体地,根据当前编码像素Cij的待编码像素分量的原始值 与第二参考像素即Ps的待编码像素分量的重建值
计算当前编码像素Cij的待编码像素分量相对第二参考像素Ps的第二预测残差 为
[0163]
[0164] 本发明实施例通过计算重建像素的权重获得参考像素的方式,计算当前预测像素的预测残差,与现有方法相比,当待压缩图像的人造纹理较为复杂时,通过定义不同的参考像素获得预测残差,所定义的参考像素为图像中的原始像素,此种方式更容易提高当前预
测像素的准确率,能够进一步提高复杂纹理区域预测残差的精度,进一步降低理论极限熵,提高带宽压缩率。此外利用符合纹理特征的十字形搜索窗口寻找参考像素,对于复杂纹理
图像,预测效果更优,并且十字形窗口内像素数少,节约了传输的比特数。
[0165] 实施例四
[0166] 本发明实施例在实施例一至实施例三任一基础上,步骤S4还包括以下步骤:
[0167] S41、根据一组第一预测残差计算当前编码宏块MBx的第一绝对残差和。
[0168] 根据步骤S24,由步骤S23中得到的最小的采样绝对残差和例如 即为第一绝对残差和,则第一绝对残差和 为
[0169]
[0170] S42、根据一组第二预测残差计算当前编码宏块MBx的第二绝对残差和。
[0171] 设定当前编码宏块MBx中的第1个当前编码像素为Cij,则当前编码宏块MBx包含的M个当前编码像素为Cij、Cij+1、Cij+2、...Cij+m...、Cij+M-1,根据步骤S332,当前编码宏块MBx中M个像素的待编码像素分量的一组第二预测残差为
[0172]
[0173] 则当前编码宏块MBx的第二绝对残差和 为
[0174]
[0175] 实施例五
[0176] 本发明实施例在实施例一至实施例四任一基础上,在步骤S5中,根据两种预测方法得到的绝对残差和,即第一绝对残差和 和第二绝对残差和 比较第一绝
对残差和与第二绝对残差和,选择其中最小值对应的预测方法作为当前编码宏块MBx的最
优预测方法,将根据该最优预测方法确定的一组参考像素作为当前编码宏块MBx的一组最
优参考像素,将根据该最优预测方法计算得到的一组预测残差作为当前编码宏块MBx的一
组最优预测残差。
[0177] 具体地,若 则确定等距采样预测方法为最优预测方法,根据等距采样预测方法得到的一组第一预测残差为当前编码宏块MBx的一组最优预测残差;
[0178] 若 则确定自适应十字窗口预测方法为最优预测方法,根据十字窗口预测方法得到的一组第二预测残差为当前编码宏块MBx的一组最优预测残差。
[0179] 若 则预设一个默认预测方法,确定该默认预测方法为最优预测方法,根据该默认预测方法得到的一组预测残差为当前编码宏块MBx的一组最优预测残
差。默认预测方法可设定为等距采样预测方法,或设定为自适应十字窗口预测方法。
[0180] 本文中,重建值是指已压缩图像解压端得到的像素分量值,进一步,预测残差加上参考值,即参考像素的对应像素分量值,便可得重建值。
[0181] 综上所述,本发明实施例的带宽压缩中复杂纹理的双模式选择预测方法,采用了两种不同的预测方法,以宏块为预测单元,通过比较两种不同的预测方法得到的预测残差,选择针对该宏块的最优预测方法进行预测残差的计算,对于复杂纹理图像,可根据图像不
同区域纹理特征的不同,自适应地选择最优的预测方法,预测效果更优,进一步降低了理论极限熵。
[0182] 综上所述,本文中应用了具体个例对本发明基于带宽压缩中复杂纹理的双模式选择预测方法进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思
想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制,本发明的保护范围应以所附的权利要求为准。
高效检索全球专利

专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。

我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。

申请试用

分析报告

专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。

申请试用

QQ群二维码
意见反馈