专利汇可以提供图像匹配方法专利检索,专利查询,专利分析的服务。并且本 发明 公开了一种图像匹配方法,属于图像匹配技术领域。所述方法包括:利用MSER方法检测出待匹配的图像中的同质区域;采用椭圆区域方程对检测到的每个同质区域进行拟合;采用椭圆形梯度直方图和多 尺度图 像分解 抽取 经过椭圆区域方程拟合后的同质区域所在测量区域的 特征向量 ;采用分层k均值聚类 算法 构造同质区域集合的二叉树,进行图像匹配。所述方法还包括:采用结合二叉树的渐进式方法构建感兴趣区域的分类器,进行图像匹配。本发明结合图像尺度空间和统计学习方法大大地降低了提取图像特征向量的复杂度和局部区域匹配复杂度,同时增强了图像匹配算法的 稳定性 。,下面是图像匹配方法专利的具体信息内容。
1.一种图像匹配方法,其特征在于,所述方法包括: 步骤A:利用MSER方法检测出待匹配的图像中的同质区域; 步骤B:采用椭圆区域方程对检测到的每个同质区域进行拟合; 步骤C:采用椭圆形梯度直方图抽取经过椭圆区域方程拟合后的同质区域所在测量区域的特征向量; 步骤D:采用多尺度图像分解抽取经过椭圆区域方程拟合后的同质区域所在测量区域的特征向量; 步骤E:采用分层k均值聚类算法构造同质区域集合的二叉树,进行图像匹配。
2. 如权利要求1所述的图像匹配方法,其特征在于,所述步骤B具体包括: 步骤B1:对检测出的同质区域内像素坐标的均值向量和协方差矩阵进行估算; 步骤B2:根据估算出的均值向量和协方差矩阵对椭圆区域方程的参数进行估算。
3. 如权利要求l所述的图像匹配方法,其特征在于,所述步骤C具体包括: 步骤Ch选取比所述同质区域面积大的邻域作为测量区域;步骤C2:将所述测量区域分别沿切向角度和轴向按比例划分,并将划分得到的单元格内 像素的梯度按不同的方向进行等间隔量化,得到所述测量区域的特征向量。
4. 如权利要求l所述的图像匹配方法,其特征在于,所述步骤D具体包括: 步骤D1:将所述同质区域在尺度空间中进行降采样,并计算每个尺度的图像对应的梯度场;步骤D2:按照所述同质区域的椭圆区域方程,选取降采样后的椭圆短轴长度不大于预先 设定值的最大尺度;步骤D3:从选取出的尺度的图像对应的梯度场中抽取所述同质区域所在测量区域的椭圆 形梯度直方图特征向量。
5. 如权利要求4所述的图像匹配方法,其特征在于,所述步骤D3具体包括:步骤D3-1:所述同质区域内每个像素的梯度方向均以椭圆的长轴方向为基准进行旋转归 一化;步骤D3-2:提取角度为^的椭圆区域的椭圆形梯度直方图特征向量,并将所述特征向量 重新组合成角度为(^ + ;r)方向的椭圆形梯度直方图特征向量。
6. 如权利要求1所述的图像匹配方法,其特征在于,所述步骤E具体包括: 步骤E1:采用k均值聚类算法对同质区域集合进行反复的分层的划分,直到每个子集中包含一个样本为止;步骤E2:按照自顶向下和自底向上的方向搜索最近邻匹配。
7. 如权利要求1所述的图像匹配方法,其特征在于,所述方法还包括: 步骤F:采用结合二叉树的渐进式方法构建感兴趣区域的分类器,进行图像匹配。
8. 如权利要求7所述的图像匹配方法,其特征在于,所述步骤F具体包括: 步骤F1:从二叉树的根节点开始,以所有标记的样本集训练分类器;步骤F2:检査所述分类器是否符合要求,如果不符合要求,则抛弃所述分类器,并根据 所述分类器对应节点的左子节点和右子节点的最近邻距离准则,将样本分为两个子集合,重 新分别训练所述两个子集合对应节点的分类器,直至搜索完毕所有所述二叉树的节点,构建 感兴趣区域的分类器;步骤F3:按照所述二叉树的匹配算法更新每个样本的最近邻状态,并且利用所述二叉树 节点处的分类器排除被判决为负样本类别的同质区域。
9. 如权利要求8所述的图像匹配方法,其特征在于,所述步骤F2中检查所述分类器是否符合要求的步骤具体为:检査所述分类器的虚警率和漏警率是否达到预先设置的期望值,如果达到期望值,则所述分类器符合要求;或者,检査所述分类器对应节点是否为所述二叉树的叶子节点,如果是叶子节点,则所 述分类器符合要求。
造成),提高图像匹配的稳定性,以及降低图像匹配算法的复杂度,提高匹配速度是函待解决 的问题。发明内容为了解决同一场景的不同观测图像之间存在显著的差异带来的图像匹配困难,提高图像 匹配的稳定性,以及降低图像匹配算法的复杂度,本发明提供了一种图像匹配方法,所述方 法包括:步骤A:利用MSER方法检测出待匹配的图像中的同质区域; 步骤B:采用椭圆区域方程对检测到的每个同质区域进行拟合;步骤C:采用椭圆形梯度直方图抽取经过椭圆区域方程拟合后的同质区域所在测量区域 的特征向量;步骤D:采用多尺度图像分解抽取经过椭圆区域方程拟合后的同质区域所在测量区域的 特征向量;步骤E:采用分层k均值聚类算法构造同质区域集合的二叉树,进行图像匹配。 所述步骤B具体包括:步骤B1:对检测出的同质区域内像素坐标的均值向量和协方差矩阵进行估算; 步骤B2:根据估算出的均值向量和协方差矩阵对椭圆区域方程的参数进行估算。 所述步骤C具体包括:步骤Cl:选取比所述同质区域面积大的邻域作为测量区域;步骤C2:将所述测量区域分别沿切向角度和轴向按比例划分,并将划分得到的单元格内 像素的梯度按不同的方向进行等间隔量化,得到所述测量区域的特征向量。 所述步骤D具体包括:'步骤D1:将所述同质区域在尺度空间中进行降采样,并计算每个尺度的图像对应的梯度 场;步骤D2:按照所述同质区域的椭圆区域方程,选取降采样后的椭圆短轴长度不大于预先 设定值的最大尺度;步骤D3:从选取出的尺度的图像对应的梯度场中抽取所述同质区域所在测量区域的椭圆形梯度直方图特征向量。所述步骤D3具体包括-步骤D3-1:所述同质区域内每个像素的梯度方向均以椭圆的长轴方向为基准进行旋转归
一化;步骤D3-2:提取角度为e的椭圆区域的椭圆形梯度直方图特征向量,并将所述特征向量 重新组合成角度为(e + ;r)方向的椭圆形梯度直方图特征向量。 所述步骤E具体包括:步骤E1:采用k均值聚类算法对同质区域集合进行反复的分层的划分,直到每个子集中 包含一个样本为止;步骤E2:按照自顶向下和自底向上的方向搜索最近邻匹配。 所述方法还包括:步骤F:采用结合二叉树的渐进式方法构建感兴趣区域的分类器,进行图像匹配。 所述步骤F具体包括:步骤Fh从二叉树的根节点开始,以所有标记的样本集训练分类器;步骤F2:检查所述分类器是否符合要求,如果不符合要求,则抛弃所述分类器,并根据 所述分类器对应节点的左子节点和右子节点的最近邻距离准则,将样本分为两个子集合,重 新分别训练所述两个子集合对应节点的分类器,直至搜索完毕所有所述二叉树的节点,构建 感兴趣区域的分类器;步骤F3:按照所述二叉树的匹配算法更新每个样本的最近邻状态,并且利用所述二叉树 节点处的分类器排除被判决为负样本类别的同质区域。所述步骤F2中检查所述分类器是否符合要求的步骤具体为:检查所述分类器的虚警率和漏警率是否达到预先设置的期望值,如果达到期望值,则所 述分类器符合要求;或者,检查所述分类器对应节点是否为所述二叉树的叶子节点,如果是叶子节点,则所 述分类器符合要求。本发明提供的技术方案的有益效果是:本发明结合图像尺度空间和统计学习方法大大地 降低了提取图像特征向量的复杂度和局部区域匹配复杂度,同时增强了图像匹配算法的稳定 性;在不同图像集上的实验结果表明,本发明提供的图像匹配方法的图像匹配速度比现有技 术中的穷举图像匹配方法至少提高一个数量级而且性能更加稳定。附图说明图1是本发明提供的图像匹配方法的流程图;图2是本发明用MSER方法检测出的同质区域和用椭圆方程进行拟合的示意图;
图3是本发明采用椭圆形梯度直方图和多尺度图像分解的方法抽取测量区域的特征向量 的示意图;图4是本发明提供的尺度空间中的图像金字塔示意图; 图5是本发明提供的基于HKB树的最近邻搜索示意图; 图6是本发明提供的P-Bootsing训练方法示意图。具体实施方式为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进 一步地详细描述。本发明提供了一种基于MSER同质区域的图像匹配方法,该方法首先提取以椭圆方程描述的同质区域的方向直方图特征向量,然后结合分层A均值聚类和统计鉴别学习进行快速而且准确的局部图像匹配。参见图l,本发明提供的图像匹配方法具体包括以下步骤:步骤101:利用MSER方法检测出待匹配的两幅图像中的同质区域;图像中的某些区域,其在整体明暗发生变化时受到的影响比较小,这些区域被称作稳定区域;由于按照MSER方法检测到的稳定区域有同质的特性,所以MSER方法检测出的MSER稳定区域就是MSER同质区域;步骤102:采用椭圆区域方程对检测到的两幅图像中的每个同质区域进行拟合; 不同视角图像中检测到的MSER同质区域之间通常存在仿射变换,为了进行准确的特征抽取,需要精确估计同质区域的方向和尺度,本发明采用椭圆区域方程化对检测出的每个同质区域进行拟合,椭圆区域方程A的数学表达式如下式所示:.其中,(A,>0, a和6分别表示椭圆的中心和两个彼此垂直的半轴长度,e是椭圆长轴 与水平坐标轴的正向的夹角,由f椭圆关于其中心轴向对称,所以Pe[-;r/2,;r/2),如图2 所示;设椭圆区域马内像素坐标的均值向量和协方差矩阵分别是Jl和C:对于0 = 0的椭圆区域,存在如下关系式:
7) 如果《s《,则令"-;t〃否则令"=^;8) 重复执行步骤4-7,直到node(")是叶子节点为止;9) 重复执行步骤3-8,直到S,中所有的区域匹配完毕; 上述算法的核心思想是:给定S2中的样本b,设叶子节点a,是其在HKB树中至顶向下找到的最近邻匹配,根据、到a,的距离更新候选匹配集合;然后,从叶子节点a,.,至底向上 搜索其祖先节点的所有后裔叶子节点,同时,根据、到这些叶子节点的距离,更新候选匹配 结果;设集合S,的HKB树的深度为A ,基于HKB树的匹配算法的复杂度为0(/^2力;虽然HKB树通常不是满二叉树,由于不同的同质区域之间有一定的重叠,所以相应的E-HOG特征向量 之间有一定的相似性,这使得HKB树的左右子树的结构相对平衡,也就是说HKB树的深度 满足/j《W,,因此极大地提高了匹配速度;步骤105:采用结合HKB树的渐进式Boosting方法,构建感兴趣区域的分类器,进行图 像匹配;在目标检测和识别等应用中,感兴趣的目标区域往往是整幅图像的一部分,如果能够利 用背景信息,将有助于提高匹配算法的性能;假设图像I,中感兴趣区域的MSER区域集合是 S,,图像12中检测到的MSER区域集合是、,通常S2中有相当多的同质区域是与S,无关的局部图像区域,如果能够快速地剔除这些属于无关背景的同质区域,那么匹配算法的搜索代 价可以进一步降低,为此,本发明采用了一种结合HKB树的渐进式Boosting方法 (P-Boosting),构建感兴趣区域的分类器;在训练分类器时,正样本集合由感兴趣区域中的 MSER区域组成,负样本集合由感兴趣区域周围的背景区域中的MSER区域组成,首先从根 节点开始,以所有标记的样本集训练Real-Boost分类器,然后检査Real-Boost分类器的虚警 率和漏警率是否达到预先设置的期望值,如果达到期望值或者Real-Boost分类器对应节点是 HKB树的叶子节点,则Real-Boost分类器符合要求,若没有达到期望值,则抛弃Real-Boost 分类器,并根据Real-Boost分类器对应节点的左子节点和右子节点的最近邻距离准则,将样 本分为两个子集合,重新分别训练两个子集合对应节点的分类器,以如此渐进式训练的方式 直至搜索完毕所有HKB树的节点,得到P-Boosting分类器,如图6所示,具体可以通过以下 步骤实现:1)给定HKB树r-^iode("》二,训练样本集X:lx,]二及其类别标记^^,设定期望 漏警率y;和虚警率/。;2) 令0 = {0„,<5„》二,其中,《=-1表示第"个节点处不存在分类器,&=0表示该节 点处需要训练分类器,《=1表示该节点处存在分类器&,初始时刻令&=-1 (1S"^A^);3) 设x中各样本在树r中的位置标记为初始时刻,令/,=1 (1《z、AO,表示所有样本都在树r的根节点处,令《-o表示根节点处需要训练分类器;4) 设X"是X中位置标记为"的所有样本组成的子集合,利用X"为第w个节点训练 Real-Boost分类器/z„ ,得到在X„上的虚警率e。,漏警率^ ;5) 判断如果e。S/。且^《/;或node(")是叶子节点,则令《=1;6) 否则令《=-1,并根据到节点node(")的左子节点node(、)和右子节点node(t)的最 近邻距离准则,将X"中的样本分为两个子集合Z,和Z,,将Z,中样本的位置标记设置为^, Z,中样本的位置标记设置为、,令《,=《=0;7) 重复执行步骤4-6,直到没有《=0为止;采用上述方法训练得到的树状分类器中并非每个节点处都存在分类器,如图6所示;在 训练P-Boosting分类器时,实验中通常取,=/a =0;利用P-Boosting分类器,可以进一步加 速集合S^卩S,的匹配过程:对于集合S2中的任意样本b"按照基于HKB树的匹配算法更新 集合S,中每个样本的最近邻状态;在匹配过程中,如果访问到的节点node(")存在分类器, 就利用分类器^对、分类;如果b,.被识别为负样本类别,就停止对b,.的匹配搜索。本发明结合图像尺度空间和统计学习方法大大地降低了提取图像特征向量的复杂度和局 部区域匹配复杂度,同时增强了图像匹配算法的稳定性;在不同图像集上的实验结果表明, 本发明提供的图像匹配方法的图像匹配速度比现有技术中的穷举图像匹配方法至少提高一个 数量级而且性能更加稳定。本发明提供的图像匹配方法适用于光照、视角和尺度变化及部分遮挡的图像匹配,尤其 能够较好的处理纹理比较平坦的图像匹配,进一步地,本发明提供的图像匹配方法还可以直 接扩展到目标跟踪和目标识别等应用领域中。以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之 内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
标题 | 发布/更新时间 | 阅读量 |
---|---|---|
一种基于学习的稀疏表示的超分辨率图像重建方法 | 2020-05-11 | 322 |
一种图像数据加权分类方法和系统 | 2020-05-11 | 436 |
基于重构模型的人体运动意向检测方法 | 2020-05-13 | 43 |
基于卷积神经网络和概念格的图像语义完备标注方法 | 2020-05-08 | 399 |
风电-负荷场景的极限传输功率的计算方法 | 2020-05-11 | 803 |
一种点邻域尺度差异描述的点云配准方法 | 2020-05-08 | 616 |
基于半监督学习的渣土车偷倒判别方法、系统和装置 | 2020-05-08 | 730 |
基于自样例增强的超分辨率图像重建方法 | 2020-05-08 | 196 |
一种基于VMD和MFSS模型的往复压缩机寿命预测方法 | 2020-05-12 | 304 |
基于异构多核的卫星气象数据喷泉解码算法硬件化系统 | 2020-05-12 | 232 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。
专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。