技术领域
[0001] 本
发明涉及变电场所异物识别技术领域，特别涉及一种基于增强图像对比的变电场所悬挂物识别方法。
背景技术
[0002] 变电场所一般在四周较空旷地带，或者在农村，或者在城市郊区，且主要设备都在室外，容易受到外来异物入侵。异物入侵可能会对变电站设备造成安全运行隐患，甚至会造成跳闸、起火等严重故障。悬浮物是变电场所一种常见的异物，悬浮物常有塑料袋，线缆，条状布片等，对这些悬挂物进行识别，对减少隐患有十分重要的意义。
[0003] 以前的设备巡检大多采用人工巡检方式，但变电场所是个高危场所，尤其在恶劣条件下，对工作人员存在安全隐患，而且人工巡检难以做到持续实时巡检。
[0004] 目前，常采用的异物识别方式有基于传统
图像识别与基于
深度学习的方式。基于传统图像识别，采用的
帧间差分法，这种
算法的主要思想是：首先对相对不变的背景环境采集一幅或多幅作为背景模板，当需要检测在此环境中是否有异物时，再实时采集一幅图像与背景模板进行逐一
像素或区域的差异计算；当差异的结果充满一定的图像面积时，则认为采集图像与模板不一致，疑似异物出现在采集图像中；背景图片与待测图片的对齐常采用
图像配准的方式。
[0005] 基于深度学习的方法，其使用当前流行的一阶段目标检测模型yolov3或者二阶段目标检测模型faster-rcnn、mask-rcnn等模型。基于大量异物样本数据训练，在携带显卡的高性能环境上运行，识别出异物。其识别准确度高，针对各种复杂纹理的异物均能识别。
[0006] 但是传统图像差分方法易受配准偏差影响，受背景、光照影响。抗干扰性不强，容易误识别。传统的作差方式，在图像配准阶段仅对近处的物体进行配准，远处的物体如
墙壁、
建筑物，即使配准，这些远处的物体像素偏移也会较大，直接作差会带来很多的干扰。传统图像差分方案在配准时会有几个像素的偏移，逐像素差分，会受像素偏移的影响。传统图像差分方案基于一种模式差分，不能很好的凸显异物边缘，容易识别出多种“伪异物”。
[0007] 基于深度学习的方法，虽然识别效果优异，对几乎所有类型的异物均有良好识别效果，但其成本较高。一：需要大量样本学习，训练需要最少几百乃至几千的数据量。由于
缺陷场景的稀缺性，收集这么多异物样本并不容易。二：需要事先知道异物的类型，比如识别塑料袋，则需要找大量塑料袋图像，识别线缆，则需要寻找大量线缆图像。如遇到一个新的未训练类别，如布条，则并不会识别。三：需要运行在高性能环境，由于深度学习模型巨大，运行时参数量非常多，一般需要运行在高性能显卡上。在我们的识别场景中，由于悬浮物异物具有较单一的纹理，如塑料袋，布条，线缆，整体纹理比较一致。基于传统
模式识别的方式也能取得较好的效果。
发明内容
[0008] 本发明的目的在于克服
现有技术存在的不足，提高异物识别的
精度。
[0009] 为实现以上目的，本发明采用一种基于增强图像对比的变电场所悬挂物识别方法，包括如下步骤：
[0010] 对待测图像进行显著性检测，提取待测图像的第一显著性区域，并转
化成掩码图像；
[0011] 在通道一中，对待测图像与原始背景图像进行差分处理，并将得到的第一作差图与掩码图像相掩，提取待测图像的第二显著性区域；
[0012] 在第二显著性区域上进行二值化处理，并对二值化图像进行
腐蚀膨胀后提取其连通区域；
[0013] 在通道二中，对待测图像与原始背景图像进行图像增强操作后进行差分处理，得到第二作差图；
[0014] 根据连通区域和第二作差图进行处理，识别出待测图像中的异物。
[0015] 进一步地，所述在通道一中，对待测图像与原始背景图像进行差分处理，并将得到的第一作差图与掩码图像相掩，提取待测图像的第二显著性区域，包括：
[0016] 在所述通道一中，将所述待测图像和所述原始背景图像进行配准，并分别对所述待测图像和所述原始背景图像进行灰度化、中值滤波处理以及像素归一化处理，得到归一化后的待测图像和归一化后的原始背景图像；
[0017] 对归一化后的待测图像和归一化后的原始背景图像进行差分处理，得到所述第一作差图；
[0018] 将第一作差图与所述掩码图像进行相掩，提取待测图像的第二显著性区域。
[0019] 进一步地，所述在第二显著性区域上进行二值化处理，并对二值化图像进行腐蚀膨胀后提取其连通区域，包括：
[0020] 在所述第二显著性区域上进行自适应二值化处理，得到二值化图像；
[0021] 在所述二值化图像上进行腐蚀及图像膨胀操作，得到膨胀后的图像；
[0022] 在膨胀后的图像上提取连通性区域。
[0023] 进一步地，所述在通道二中，对待测图像与原始背景图像进行图像增强操作后进行差分处理，得到第二作差图，包括：
[0024] 在所述通道二中，对所述待测图像与所述原始背景图像进行配准，并分别对所述待测图像和所述原始背景图像进行灰度化处理，得到所述待测图像的灰度图和所述原始背景图像的灰度图；
[0025] 对所述待测图像的灰度图和所述原始背景图像的灰度图分别进行图像增强处理，得到两增强后的图像；
[0026] 对两增强后的图像进行作差处理，得到所述第二作差图。
[0027] 进一步地，所述根据连通区域和第二作差图进行处理，识别出待测图像中的异物，包括：
[0028] 基于所述连通区域边缘与所述第二作差图边缘的重合度，对所述连通区域进行过滤处理，得到保留的连通区域；
[0029] 在保留的连通区域上，进行异物检测。
[0030] 进一步地，在所述基于所述连通区域边缘与所述第二作差图边缘的重合度，对所述连通区域进行过滤处理，得到保留的连通区域之前，还包括：
[0031] 对所述连通区域进行基于连通区域面积过滤处理，得到过滤后的连通区域；
[0032] 相应地，基于过滤后的连通区域边缘与所述第二作差图边缘的重合度，对所述过滤后的连通区域进行过滤处理，得到保留的连通区域。
[0033] 进一步地，在所述基于所述连通区域边缘与所述第二作差图边缘的重合度，对所述连通区域进行过滤处理，得到保留的连通区域之前，还包括：
[0034] 将所述第二作差图进行像素归一化处理，得到归一化后的差分图像；
[0035] 将所述归一化后的差分图像与所述掩码图像进行相掩，提取待测图像的第三显著性区域。
[0036] 进一步地，所述在保留的连通区域上，进行异物检测，包括：
[0037] 在所述保留的连通区域上，对相邻区域结合所述原始背景图像使用区域生成算法进行连接，得到完整异物的形态。
[0038] 进一步地，所述通道一和所述通道二为两个并行的检测通道。
[0039] 进一步地，所述差分处理具体为带像素偏移纠正的差分处理。
[0040] 与现有技术相比，本发明存在以下技术效果：本发明在传统的图像配准差分方法上进行了一系列处理：显著性检测、仅对显著性区域进行作差，滤掉复杂背景造成的干扰；基于增强图像的作差比较、图像增强，突出物体边缘，
淡化物体内部细节，再作差，突出了异物的边缘，将物体表面的光照影响降到最小；基于像素的位移纠偏功能，排除配准偏差的影响；双通道信息融合，原始图像作差后的图像作差有较多的背景信息干扰，增强后的图像作差部分内部细节并不明显，综合考虑更能全面的体现异物的边缘及内部特征，有效的消除了原有方法的弊端，提高了原有方法的识别精确度，扩大了原有方法的应用范围。
附图说明
[0041] 下面结合附图，对本发明的具体实施方式进行详细描述：
[0042] 图1是一种基于增强图像对比的变电场所悬挂物识别方法的步骤示意图；
[0043] 图2是一种基于增强图像对比的变电场所悬挂物识别方法的主体
流程图。
具体实施方式
[0044] 为了更进一步说明本发明的特征，请参阅以下有关本发明的详细说明与附图。所附图仅供参考与说明之用，并非用来对本发明的保护范围加以限制。
[0045] 如图1-图2所示，本
实施例公开了一种基于增强图像对比的变电场所悬挂物识别方法，包括如下步骤S1至S5：
[0046] S1、对待测图像进行显著性检测，提取待测图像的第一显著性区域，并转化成掩码图像；
[0047] 需要说明的是，本实施例中采用的显著性检测算法包括但不限于fastMBD等算法，为提高处理速度，对图像缩放处理。
[0048] 需要说明的是，fastMBD算法的代价函数采取Minimum Barrier Distance计算：
[0049]
[0050] 其中，π表示路径，β表示距离，I表示像素值，v表示当前路径的像素点个数。
[0051] S2、在通道一中，对待测图像与原始背景图像进行差分处理，并将得到的第一作差图与掩码图像相掩，提取待测图像的第二显著性区域；
[0052] S3、在第二显著性区域上进行二值化处理，并对二值化图像进行腐蚀膨胀后提取其连通区域；
[0053] S4、在通道二中，对待测图像与原始背景图像进行图像增强操作后进行差分处理，得到第二作差图；
[0054] S5、根据连通区域和第二作差图进行处理，识别出待测图像中的异物。
[0055] 需要说明的是，所述通道一和所述通道二为两个并行的检测通道。所述差分处理具体为带像素偏移纠正的差分处理。
[0056] 具体来说，上述步骤S2：在通道一中，对待测图像与原始背景图像进行差分处理，并将得到的第一作差图与掩码图像相掩，提取待测图像的第二显著性区域，包括如下步骤S21至S23：
[0057] S21、在所述通道一中，将所述待测图像和所述原始背景图像进行配准，并分别对所述待测图像和所述原始背景图像进行灰度化、中值滤波处理以及像素归一化处理，得到归一化后的待测图像和归一化后的原始背景图像；
[0058] 需要说明的是，将原始待测图像基于背景图像进行配准的方法包括但不限于SHIFT算法，以提高配准的准确性，使用基于双向最佳sift特征点匹配。并具体将待测图像与原始背景图像分别进行灰度化、中值滤波，使用3x3的滤波核、归一化处理，归一到0-255之间。
[0059] S22、对归一化后的待测图像和归一化后的原始背景图像进行差分处理，得到所述第一作差图；
[0060] 需要说明的是，差分处理的方式，为待测图像的像素值与背景图像对应的像素值的n×n区域作差，比如待测图像的像素值与原始背景图像对应的像素值的3×3或者5×5区域作差，并取差值的最小值为对象
位置的像素点。并取差值的最小值为对象位置的像素点。考虑到悬浮物像素点数值较为一致，基于区域作差不会消除异物区域。基于区域的作差有效的过滤了图像噪点，作差图像更加稳定，抗干扰性更好。同时，配准后，两张图像并不会每个像素点均完全重合，可能有数个像素的偏移，基于区域的作差有效的纠正了像素偏移造成的干扰。
[0061] S23、将第一作差图与所述掩码图像进行相掩，提取待测图像的第二显著性区域。
[0062] 具体来说，上述步骤S3：在第二显著性区域上进行二值化处理，并对二值化图像进行腐蚀膨胀后提取其连通区域，具体包括如下细分步骤S31至S33：
[0063] S31、在所述第二显著性区域上进行自适应二值化处理，得到二值化图像；
[0064] 需要说明的是，这里的二值化方法包括但不限于OSTU算法。
[0065] S32、在所述二值化图像上进行腐蚀及图像膨胀操作，得到膨胀后的图像；
[0066] 需要说明的是，在二值化图像上使用3×3滤波核图像进行腐蚀及3×3的滤波核进行图像膨胀操作。
[0067] S33、在膨胀后的图像上提取连通性区域。
[0068] 具体来说，上述步骤S4：在通道二中，对待测图像与原始背景图像进行图像增强操作后进行差分处理，得到第二作差图，具体包括如下细分步骤S41至S43：
[0069] S41、在所述通道二中，对所述待测图像与所述原始背景图像进行配准，并分别对所述待测图像和所述原始背景图像进行灰度化处理，得到所述待测图像的灰度图和所述原始背景图像的灰度图；
[0070] S42、对所述待测图像的灰度图和所述原始背景图像的灰度图分别进行图像增强处理，得到两增强后的图像；
[0071] 需要说明的是，本实施例中可采用MSR算法也即多尺度Retinex算法对图像进行图像增强操作。
[0072] 其中，MSR计算公式如下：
[0073]
[0074]
[0075] 其中，S(x,y)为原始图像，r(x,y)为输出图像，(x,y)为像素坐标值，w各尺度权重，c高斯函数方差，K表示尺度总数，k表示尺度，*表示卷积，Fk(x,y)表不同尺度下的F(x,y)，F(x,y)表示中心环绕函数。
[0076] 上述公式中，取三个尺度，w1＝w2＝w3＝1/3，对应的高斯函数方差c为15,80,125。
[0077] S43、对两增强后的图像进行作差处理，得到所述第二作差图。
[0078] 其中，第二作差图中主要包含物体的边缘细节。
[0079] 具体来说，上述步骤S5：所述根据连通区域和第二作差图进行处理，识别出待测图像中的异物，具体包括如下细分步骤S51至S52：
[0080] S51、基于所述连通区域边缘与所述第二作差图边缘的重合度，对所述连通区域进行过滤处理，得到保留的连通区域；
[0081] 其中，差分为基于图像局部区域差分，的其计算公式为：
[0082] sub_img(i,j)＝min{src1_img(i+m,j+n)-src2_img(i+m,j+n)},
[0083] 其中，m,n为设定的区域，如3*3，5*5等；i、j表示像素点横纵坐标位置，src1_img表示作差的两张图像的第一张，src2_img表示作差的两张图像的第二张， 表示的是m取值范围-3到3， 表示n的取值范围-3到3。
[0084] 具体为：在连通域中，包含较多边缘细节的区域进行保留，较少边缘细节或者无边缘细节的区域予以过滤，如连通区域边缘与差分图像的边缘的重合度小于0.5予以过滤。
[0085] S52、在保留的连通区域上，进行异物检测。
[0086] 其中，其中，重合度计算公式为：
[0087]
[0088] 公式中，N为相近领域，取值3或5。
[0089] 像素点值为1为真实边缘，否则为伪边缘，真实像素点比例超过一定
阈值即为真实异物。
[0090] 具体为：在保留的连通性上分析，邻近的区域结合原图像使用区域生成算法进行连接，形成完整的异物形态。如2个连通区域的的距离小于连通区域长宽的0.2倍，在连通域边缘基于8领域像素差生长的策略，判定相邻连通区域是否连接。
[0091] 进一步地，在上述步骤S51：基于所述连通区域边缘与所述第二作差图边缘的重合度，对所述连通区域进行过滤处理，得到保留的连通区域之前，还包括：
[0092] 对所述连通区域进行基于连通区域面积过滤处理，得到过滤后的连通区域；
[0093] 相应地，基于过滤后的连通区域边缘与所述第二作差图边缘的重合度，对所述过滤后的连通区域进行过滤处理，得到保留的连通区域。
[0094] 需要说明的是，本实施例对提取后的联通区域进行基于连通区域面积过滤处理，对面积小于300的区域或者最小外接矩形长小于100或者宽度小于6的区域进行过滤。
[0095] 进一步地，在上述步骤S51：基于所述连通区域边缘与所述第二作差图边缘的重合度，对所述连通区域进行过滤处理，得到保留的连通区域之前，还包括：
[0096] 将所述第二作差图进行像素归一化处理，得到归一化后的差分图像；
[0097] 将所述归一化后的差分图像与所述掩码图像进行相掩，提取待测图像的第三显著性区域。
[0098] 需要说明的是，通道二的作用是过滤伪异物，在通道一产生的作差图像中因光照变化等存在一些伪异物，在通道二中，产
生物体的边缘特征。提取通道二的边缘与通道一对应区域的像素值，取和，超过某一阈值，认为该像素点为真实的边缘像素点，对已确认是边缘的像素点进行统计，如果真实的边缘像素点占总的边缘像素点超过一定阈值，认为该异物区域是真实的，不是伪异物。
[0099] 特别地，本实施例中，滤波核的选择及高斯核变量、过滤参数的设置均考虑到图像尺寸1920×1080、异物的特点(异物纹理较一致，异物整体呈条状或
块状)，在悬浮物的检测上，有优异的效果。
[0100] 本发明通过双通道差分模式来进行过滤干扰项，进行异物识别，首先，在待测图像上进行显著性检测，提取显著性区域以过滤掉无关背景；其次，基于灰度图的差分，二值化后腐蚀膨胀提取联通区域；然后，使用增强图像提取图像边缘轮廓，基于此进行差分，得到差分图；最后，在二个通道上差分处理后的差分图进行综合分析，过滤掉大量“伪异物”，并进行区域生成合并联通区域，增强图差分与原始背景图像差分的信息融合复原悬挂物的形态，得到最终的异物图。该方法充分考虑到变电站悬浮物等异物的特征，并对传统差分算法进行了4个有效的扩展，提高了悬浮物的识别率。
[0101] 本发明方法与深度学习模型相比，本方法无需大量样本训练，无需预知道悬浮物具体类型。与基于背景建模减除的方法比，原方法需要100张以上背景图片，本方法仅需要一张原始背景图片。与基于传统配准差分对比的方法比，本方法在识别精确度，抗干扰均有大幅提升。
[0102] 以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何
修改、等同替换、改进等，均应包含在本发明的保护范围之内。
