首页 / 专利库 / 计算机网络 / 环境网络 / 一种基于滑动窗口的自适应在线异常检测方法

一种基于滑动窗口的自适应在线异常检测方法

阅读:2发布:2023-05-14

专利汇可以提供一种基于滑动窗口的自适应在线异常检测方法专利检索,专利查询,专利分析的服务。并且本 发明 公开了一种基于滑动窗口的自适应在线 异常检测 方法。技术方案是先构建由控制 节点 、数据节点和检测节点组成的数据流异常检测系统;控制节点向数据节点发送窗口数据初始化 请求 ;数据节点向检测节点发送窗口初始化数据和初始化请求;检测节点存储滑动窗口中的数据;检测节点进行异常检测,将检测结果发送给控制节点;控制节点将检测结果返回给用户;如果控制节点接收到异常检测结束请求,则停止异常检测,否则向数据节点发送窗口数据更新请求,由数据节点向检测节点发送窗口更新数据和更新请求,检测节点根据是否出现异常爆发采用不同策略对滑动窗口进行数据更新。采用本发明可实时检测异常爆发,有效提高异常检测的准确率和效率。,下面是一种基于滑动窗口的自适应在线异常检测方法专利的具体信息内容。

1.一种基于滑动窗口的自适应在线异常检测方法,其特征在于包括以下步骤:
第一步,构建一个数据流异常检测系统,它由一个控制节点、一个数据节点和一个检测节点组成,每个节点都是一台可独立运行的计算机,各节点通过网络设备互连;
控制节点、数据节点和检测节点上均安装有操作系统、TCP/IP协议软件,配置了网络环境;
控制节点负责与用户交互,接收用户提交的异常检测请求,并向数据节点发送窗口数据初始化请求;负责接收用户提交的异常检测结束请求,停止异常检测;负责接收检测节点发送的检测结果,并将检测结果返回给用户,向数据节点发送窗口数据更新请求;
数据节点负责接收采集设备发送的数据,接收控制节点发送的窗口数据初始化请求,向检测节点发送窗口初始化数据和窗口数据初始化请求;接收控制节点发送的窗口数据更新请求,向检测节点发送窗口更新数据和窗口数据更新请求;
检测节点负责接收数据节点发送的窗口初始化数据和窗口数据初始化请求,对滑动窗口进行初始化;负责在滑动窗口内进行异常检测,并将检测结果发送给控制节点;负责检测滑动窗口中是否出现异常爆发,接收数据节点发送的窗口更新数据和窗口数据更新请求,并根据检测结果选择不同策略对滑动窗口进行数据更新;
控制节点上安装有任务管理程序和结果回收程序,任务管理程序负责接收用户提交的异常检测请求,并向数据节点发送窗口数据初始化请求;负责接收用户提交的异常检测结束请求,停止异常检测;结果回收程序负责接收检测节点发送的检测结果并返回给用户,向数据节点发送窗口数据更新请求;
数据节点上安装有接收程序和发送程序,接收程序负责接收采集设备发送的数据。发送程序一方面接收控制节点发送的窗口数据初始化请求,向检测节点发送窗口初始化数据和窗口数据初始化请求;一方面接收控制节点发送的窗口数据更新请求,向检测节点发送窗口更新数据和窗口数据更新请求;
检测节点上安装有异常检测程序和窗口管理程序,异常检测程序负责在滑动窗口内进行异常检测,并将检测结果发送给控制节点;窗口管理程序一方面负责接收数据节点发送的窗口初始化数据和窗口数据初始化请求,对滑动窗口进行初始化;一方面负责检测滑动窗口中是否出现异常爆发,接收数据节点发送的窗口更新数据和窗口数据更新请求,并根据检测结果选择不同策略对滑动窗口进行数据更新;
第二步,控制节点的任务管理程序接收用户提交的异常检测请求,并向数据节点发送窗口数据初始化请求;
第三步,数据节点接收控制节点发送的窗口数据初始化请求,向检测节点发送窗口初始化数据和窗口数据初始化请求,具体方法是:
3.1数据节点的发送程序接收控制节点发送的窗口数据初始化请求;
3.2数据节点的接收程序接收采集设备实时采集并发送的w个窗口初始化数据d1,d2,……,di,……,dw,1≤i≤w,w是滑动窗口中存储的数据的数量,w是正整数,。
3.3数据节点的发送程序向检测节点发送d1,d2,……,di,……,dw和窗口数据初始化请求;
第四步,检测节点的窗口管理程序接收数据节点发送的d1,d2,……,di,……,dw和窗口数据初始化请求,对滑动窗口进行初始化,具体方法是:
4.1检测节点的窗口管理程序接收数据节点发送的d1,d2,……,di,……,dw和窗口数据初始化请求。
4.2采用滑动窗口数组SW[]存储滑动窗口中的数据,即由SW[i]存放di;
第五步,检测节点的异常检测程序在滑动窗口内进行异常检测,并将检测结果发送给控制节点,具体方法是:
5.1采用检测结果二维数组AD存储被检测出的异常数据及其在滑动窗口中的序号,AD[k][1]表示被检测出的第k个异常数据,AD[k][2]表示被检测出的第k个异常数据在滑动窗口中的序号,1≤k≤w;
5.2初始化检测结果二维数组AD,具体步骤如下:
5.2.1初始化检查结果序号k=1;
5.2.2令AD[k][1]=0,AD[k][2]=w+1;
5.2.3如果k5.3采用均值偏差法对滑动窗口中的数据进行异常检测,具体步骤如下:
5.3.1求滑动窗口数据均值,令滑动窗口数据均值
5.3.2求滑动窗口数据标准偏差,令滑动窗口数据标准偏差
5.3.3初始化滑动窗口数据序号i=1;
5.3.4初始化检测结果序号k=1;
5.3.5如果 λ为SW[i]与平均值的偏差超过标准偏差的倍数,则SW
[i]为异常数据,令AD[k][1]=SW[i],AD[k][2]=i,k=k+1;
5.3.6如果i5.4将检测结果二维数组AD发送给控制节点;
第六步,控制节点的结果回收程序接收检测节点发送的检测结果二维数组AD并返回给用户;
第七步,如果控制节点的任务管理程序接收到用户提交的异常检测结束请求,则停止异常检测,转第十步;否则,向数据节点发送窗口数据更新请求,转第八步;
第八步,数据节点的发送程序接收控制节点发送的窗口数据更新请求,向检测节点发送窗口更新数据和窗口数据更新请求,具体方法是:
8.1数据节点的发送程序接收控制节点发送的窗口数据更新请求;
8.2数据节点的接收程序接收采集设备实时采集并发送的s个数据b1,b2,……,bj,……,bs,1≤j≤s,s是滑动窗口中每次更新的数据的数量,s≤w-1;
8.3数据节点的发送程序向检测节点发送b1,b2,……,bj,……,bs和窗口数据更新请求;
第九步,检测节点的窗口管理程序检测滑动窗口中是否出现异常爆发,接收数据节点发送的b1,b2,……,bj,……,bs和窗口数据更新请求,并根据检测结果选择不同策略对滑动窗口进行数据更新,具体方法是:
9.1检测滑动窗口中是否出现异常爆发,具体步骤如下:
9.1.1初始化检测结果序号k=1;
9.1.2初始化异常数据数目m=0;
9.1.3如果w-s+1≤AD[k][2]≤w,令m=m+1;
9.1.4如果AD[k][2]≤w,令k=k+1,转第9.1.3步;否则,转第9.1.5步;
9.1.5如果m≤s/2,转第9.2步;否则转第9.3步;
9.2接收数据节点发送的b1,b2,……,bj,……,bs和窗口数据更新请求,按照常规方法更新滑动窗口数据,具体步骤如下:
9.2.1初始化滑动窗口数据序号i=1;
9.2.2令SW[i]=SW[i+s];
9.2.3如果i≤w-s-1,令i=i+1,转第9.2.2步;否则令i=i+1,转第9.2.4步;
9.2.4初始化滑动窗口更新数据序号j=1;
9.2.5令SW[i]=bj;
9.2.6如果i9.3接收数据节点发送的b1,b2,……,bj,……,bs和窗口数据更新请求,按照非常规方法更新滑动窗口数据,具体步骤如下:
9.3.1初始化滑动窗口更新数据序号j=1;
9.3.2初始化滑动窗口数据序号i=w-s+1;
9.3.3令SW[i]=bj;
9.3.4如果i第十步,异常检测结束。
2.如权利要求1所述的一种基于滑动窗口的自适应在线异常检测方法,其特征在于所述采集设备指能够实时获取各种变化着的物理量并将物理量转换成数值数据进行存储的各种传感器,所述物理量包括温度、湿度、压、震动这样的物理量。
3.如权利要求1所述的一种基于滑动窗口的自适应在线异常检测方法,其特征在于3.2步所述w满足
4.如权利要求1所述的一种基于滑动窗口的自适应在线异常检测方法,其特征在于4.2步所述采用滑动窗口数组SW[]存储滑动窗口中的数据的具体步骤是:
4.2.1初始化滑动窗口数据序号i=1;
4.2.2SW[i]=di;
4.2.3如果i5.如权利要求1所述的一种基于滑动窗口的自适应在线异常检测方法,其特征在于
5.3.5步所述λ≥2。
6.如权利要求1所述的一种基于滑动窗口的自适应在线异常检测方法,其特征在于第九步所述异常爆发是指在窗口的最后s个数据中包含至少s/2+1个异常数据。

说明书全文

一种基于滑动窗口的自适应在线异常检测方法

技术领域

[0001] 本发明涉及数据流的异常检测技术,尤其是基于滑动窗口的自适应在线异常检测方法。

背景技术

[0002] 异常数据是指观测数据中与大部分数据不一样、不符合期望的数据点,异常检测旨在挖掘出异常数据。随着信息采集技术的迅速发展,在金融、医疗、互联网、物流、气象、天文等各个领域陆续出现了大量动态产生的数据流数据。与传统的静态数据相比,数据流数据具有快速到达、总量无限、一次处理等特征,不仅数据的产生频率和传输速率迅速,而且对数据处理的实时性要求高,数据的时效性特点日益明显。如何在数据流上进行在线异常检测,满足数据流的时效性对数据分析的高效性的迫切需求,受到越来越多的关注,已经成为数据分析领域的热点研究方向。
[0003] 在数据流环境下,根据检测方法面向的数据集合不同,异常检测可以分为全局异常检测和窗口异常检测两种。全局异常检测旨在发现整个数据流中的异常数据,需要保存全部历史数据,存储开销较大,检测时间较长;窗口异常检测旨在发现滑动窗口中的异常数据,不需保存全部历史数据,存储开销小,检测效率高,可用性好,在各领域得到广泛应用。异常检测对异常点的检测是基于“少而不同”的基本特点的,最具代表性的方法是均值偏差法,就是依据数据与平均值的偏差程度进行异常点判定,简单高效,在许多领域得到广泛应用。由于窗口异常检测是对滑动窗口中的局部数据进行检测,当遇到异常爆发的情况,传统的窗口异常检测方法容易出现检测错误,严重影响异常检测的准确率。
[0004] 因此,如何针对异常爆发的问题,设计基于滑动窗口的自适应在线异常检测方法,有效提高大规模数据流的异常检测的准确率和效率,已经成为大数据分析领域的热点研究问题。

发明内容

[0005] 本发明要解决的技术问题是:针对数据流异常检测中的异常爆发问题,提出一种基于滑动窗口的自适应在线异常检测方法,有效提高大规模数据流的异常检测的准确率和效率。
[0006] 本发明技术方案包括以下步骤:
[0007] 第一步,构建一个数据流异常检测系统,它由一个控制节点、一个数据节点和一个检测节点组成,每个节点都是一台可独立运行的计算机,各节点通过网络设备互连。
[0008] 控制节点、数据节点和检测节点上均安装有操作系统、TCP/IP协议软件,配置了网络环境。
[0009] 控制节点负责与用户交互,接收用户提交的异常检测请求,并向数据节点发送窗口数据初始化请求;负责接收用户提交的异常检测结束请求,停止异常检测;负责接收检测节点发送的检测结果,并将检测结果返回给用户,向数据节点发送窗口数据更新请求。
[0010] 数据节点负责接收采集设备发送的数据,接收控制节点发送的窗口数据初始化请求,向检测节点发送窗口初始化数据和窗口数据初始化请求;接收控制节点发送的窗口数据更新请求,向检测节点发送窗口更新数据和窗口数据更新请求。
[0011] 检测节点负责接收数据节点发送的窗口初始化数据和窗口数据初始化请求,对滑动窗口进行初始化;负责在滑动窗口内进行异常检测,并将检测结果发送给控制节点;负责检测滑动窗口中是否出现异常爆发,接收数据节点发送的窗口更新数据和窗口数据更新请求,并根据检测结果选择不同策略对滑动窗口进行数据更新。
[0012] 控制节点上安装有任务管理程序和结果回收程序。任务管理程序负责接收用户提交的异常检测请求,并向数据节点发送窗口数据初始化请求;负责接收用户提交的异常检测结束请求,停止异常检测。结果回收程序负责接收检测节点发送的检测结果并返回给用户,向数据节点发送窗口数据更新请求。
[0013] 数据节点上安装有接收程序和发送程序。接收程序负责接收采集设备发送的数据。发送程序一方面接收控制节点发送的窗口数据初始化请求,向检测节点发送窗口初始化数据和窗口数据初始化请求;一方面接收控制节点发送的窗口数据更新请求,向检测节点发送窗口更新数据和窗口数据更新请求。所述采集设备指能够实时获取温度、湿度、压、震动等各种变化着的物理量并将物理量转换成数值数据进行存储的各种传感器
[0014] 检测节点上安装有异常检测程序和窗口管理程序。异常检测程序负责在滑动窗口内进行异常检测,并将检测结果发送给控制节点。窗口管理程序一方面负责接收数据节点发送的窗口初始化数据和窗口数据初始化请求,对滑动窗口进行初始化;一方面负责检测滑动窗口中是否出现异常爆发,接收数据节点发送的窗口更新数据和窗口数据更新请求,并根据检测结果选择不同策略对滑动窗口进行数据更新。
[0015] 第二步,控制节点的任务管理程序接收用户提交的异常检测请求,并向数据节点发送窗口数据初始化请求。
[0016] 第三步,数据节点接收控制节点发送的窗口数据初始化请求,向检测节点发送窗口初始化数据和窗口数据初始化请求,具体方法是:
[0017] 3.1数据节点的发送程序接收控制节点发送的窗口数据初始化请求。
[0018] 3.2数据节点的接收程序接收采集设备实时采集并发送的w个窗口初始化数据d1,d2,……,di,……,dw(1≤i≤w),w是滑动窗口的大小(即滑动窗口中存储的数据的数量),w是正整数,
[0019] 3.3数据节点的发送程序向检测节点发送d1,d2,……,di,……,dw和窗口数据初始化请求。
[0020] 第四步,检测节点的窗口管理程序接收数据节点发送的d1,d2,……,di,……,dw和窗口数据初始化请求,对滑动窗口进行初始化,具体方法是:
[0021] 4.1检测节点的窗口管理程序接收数据节点发送的d1,d2,……,di,……,dw(1≤i≤w)和窗口数据初始化请求。
[0022] 4.2采用滑动窗口数组SW[]存储滑动窗口中的数据,即由SW[i]存放di,具体步骤如下:
[0023] 4.2.1初始化滑动窗口数据序号i=1。
[0024] 4.2.2 SW[i]=di。
[0025] 4.2.3如果i
[0026] 第五步,检测节点的异常检测程序在滑动窗口内进行异常检测,并将检测结果发送给控制节点,具体方法是:
[0027] 5.1采用检测结果二维数组AD存储被检测出的异常数据及其在滑动窗口中的序号,AD[k][1]表示被检测出的第k个异常数据,AD[k][2]表示被检测出的第k个异常数据在滑动窗口中的序号,1≤k≤w。
[0028] 5.2初始化检测结果二维数组AD,具体步骤如下:
[0029] 5.2.1初始化检查结果序号k=1。
[0030] 5.2.2令AD[k][1]=0,AD[k][2]=w+1。
[0031] 5.2.3如果k
[0032] 5.3采用均值偏差法对滑动窗口中的数据进行异常检测,具体步骤如下:
[0033] 5.3.1求滑动窗口数据均值,令滑动窗口数据均值
[0034] 5.3.2求滑动窗口数据标准偏差,令滑动窗口数据标准偏差
[0035] 5.3.3初始化滑动窗口数据序号i=1。
[0036] 5.3.4初始化检测结果序号k=1。
[0037] 5.3.5如果 λ≥2,λ为SW[i]与平均值的偏差超过标准偏差的倍数,(在均值偏差法中,通常认为与平均值的偏差超过两倍标准偏差的数据为异常点,即λ=
2;与平均值的偏差超过三倍标准偏差的数据为高度异常点,即λ=3),则SW[i]为异常数据,令AD[k][1]=SW[i],AD[k][2]=i,k=k+1。
[0038] 5.3.6如果i
[0039] 5.4将检测结果二维数组AD发送给控制节点。
[0040] 第六步,控制节点的结果回收程序接收检测节点发送的检测结果二维数组AD并返回给用户。
[0041] 第七步,如果控制节点的任务管理程序接收到用户提交的异常检测结束请求,则停止异常检测,转第十步;否则,向数据节点发送窗口数据更新请求,转第八步继续进行异常检测。
[0042] 第八步,数据节点的发送程序接收控制节点发送的窗口数据更新请求,向检测节点发送窗口更新数据和窗口数据更新请求,具体方法是:
[0043] 8.1数据节点的发送程序接收控制节点发送的窗口数据更新请求。
[0044] 8.2数据节点的接收程序接收采集设备实时采集并发送的s个数据b1,b2,……,bj,……,bs(1≤j≤s),s是滑动窗口的滑动步长(即滑动窗口中每次更新的数据的数量),s≤w-1。
[0045] 8.3数据节点的发送程序向检测节点发送b1,b2,……,bj,……,bs和窗口数据更新请求。
[0046] 第九步,检测节点的窗口管理程序检测滑动窗口中是否出现异常爆发(即在窗口的最后s个数据中包含至少s/2+1个异常数据),接收数据节点发送的b1,b2,……,bj,……,bs和窗口数据更新请求,并根据检测结果选择不同策略对滑动窗口进行数据更新,具体方法是:
[0047] 9.1检测滑动窗口中是否出现异常爆发,具体步骤如下:
[0048] 9.1.1初始化检测结果序号k=1。
[0049] 9.1.2初始化异常数据数目m=0。
[0050] 9.1.3如果w-s+1≤AD[k][2]≤w,说明AD[k][1]存储的是异常数据,且该异常数据在滑动窗口中的序号AD[k][2]是位于窗口最后的s个数据,令m=m+1。
[0051] 9.1.4如果AD[k][2]≤w,说明AD[k][1]存储的是异常数据,令k=k+1,转第9.1.3步;否则,转第9.1.5步。
[0052] 9.1.5如果m≤s/2,则说明没有出现异常爆发,转第9.2步;否则说明出现异常爆发,转第9.3步。
[0053] 9.2接收数据节点发送的b1,b2,……,bj,……,bs和窗口数据更新请求,按照常规方法更新滑动窗口数据,具体步骤如下:
[0054] 9.2.1初始化滑动窗口数据序号i=1。
[0055] 9.2.2令SW[i]=SW[i+s]。
[0056] 9.2.3如果i≤w-s-1,说明SW[i]还没有到达窗口尾部,继续平移数据,令i=i+1,转第9.2.2步;否则令i=i+1,转第9.2.4步。
[0057] 9.2.4初始化滑动窗口更新数据序号j=1。
[0058] 9.2.5令SW[i]=bj。
[0059] 9.2.6如果i
[0060] 9.3接收数据节点发送的b1,b2,……,bj,……,bs和窗口数据更新请求,按照非常规方法更新滑动窗口数据,具体步骤如下:
[0061] 9.3.1初始化滑动窗口更新数据序号j=1。
[0062] 9.3.2初始化滑动窗口数据序号i=w-s+1。
[0063] 9.3.3令SW[i]=bj。
[0064] 9.3.4如果i
[0065] 第十步,异常检测结束。
[0066] 与现有技术相比,本发明具有以下技术优点:
[0067] 1.本发明第5.3步检测节点的异常检测程序对当前滑动窗口数据实时进行均值计算和标准偏差计算,并以此为基础进行异常检测,而不是根据事先设定的均值进行异常检测,有效保证了数据流在线异常检测的实时性和准确率。
[0068] 2.本发明第9.1步检测节点的窗口管理程序根据异常数据在滑动窗口中的分布情况实时检测异常爆发,为有效提高大规模数据流的异常检测的准确率和效率奠定了基础。
[0069] 3.本发明第9.3步,在异常爆发的情况下,检测节点的窗口管理程序利用新接收的滑动窗口更新数据替换滑动窗口中异常爆发的部分数据,以避免异常爆发对后续异常检测的影响,有效提高了大规模数据流的异常检测的准确率和效率。附图说明
[0070] 图1是本发明第一步构建的数据流异常检测系统的物理结构图。
[0071] 图2是本发明数据流异常检测系统的软件部署图。
[0072] 图3是本发明总体流程图

具体实施方式

[0073] 图3是本发明总流程图。具体流程如下:
[0074] 第一步,构建一个如图1所示的数据流异常检测系统,它由一个控制节点、一个数据节点和一个检测节点组成,每个节点都是一台可独立运行的计算机,各节点通过网络设备互连。控制节点、数据节点和检测节点上均安装有操作系统、TCP/IP协议软件,配置了网络环境。控制节点负责与用户交互,接收用户提交的异常检测请求,并向数据节点发送窗口数据初始化请求;负责接收用户提交的异常检测结束请求,停止异常检测;负责接收检测节点发送的检测结果,并将检测结果返回给用户,向数据节点发送窗口数据更新请求。数据节点负责接收采集设备发送的数据,接收控制节点发送的窗口数据初始化请求,向检测节点发送窗口初始化数据和窗口数据初始化请求;接收控制节点发送的窗口数据更新请求,向检测节点发送窗口更新数据和窗口数据更新请求。检测节点负责接收数据节点发送的窗口初始化数据和窗口数据初始化请求,对滑动窗口进行初始化;负责在滑动窗口内进行异常检测,并将检测结果发送给控制节点;负责检测滑动窗口中是否出现异常爆发,接收数据节点发送的窗口更新数据和窗口数据更新请求,并根据检测结果选择不同策略对滑动窗口进行数据更新。
[0075] 如图2所示,控制节点上安装有任务管理程序和结果回收程序。任务管理程序负责接收用户提交的异常检测请求,并向数据节点发送窗口数据初始化请求;负责接收用户提交的异常检测结束请求,停止异常检测。结果回收程序负责接收检测节点发送的检测结果并返回给用户,向数据节点发送窗口数据更新请求。数据节点上安装有接收程序和发送程序。接收程序负责接收采集设备发送的数据。发送程序一方面接收控制节点发送的窗口数据初始化请求,向检测节点发送窗口初始化数据和窗口数据初始化请求;一方面接收控制节点发送的窗口数据更新请求,向检测节点发送窗口更新数据和窗口数据更新请求。检测节点上安装有异常检测程序和窗口管理程序。异常检测程序负责在滑动窗口内进行异常检测,并将检测结果发送给控制节点。窗口管理程序一方面接收数据节点发送的窗口初始化数据和窗口数据初始化请求,对滑动窗口进行初始化;一方面检测滑动窗口中是否出现异常爆发,接收数据节点发送的窗口更新数据和窗口数据更新请求,并根据检测结果选择不同策略对滑动窗口进行数据更新。
[0076] 第二步,控制节点的任务管理程序接收用户提交的异常检测请求,并向数据节点发送窗口数据初始化请求。
[0077] 第三步,数据节点接收控制节点发送的窗口数据初始化请求,向检测节点发送窗口初始化数据和窗口数据初始化请求,具体方法是:
[0078] 3.1数据节点的发送程序接收控制节点发送的窗口数据初始化请求。
[0079] 3.2数据节点的接收程序接收采集设备实时采集并发送的w个窗口初始化数据d1,d2,……,di,……,dw(1≤i≤w)。
[0080] 3.3数据节点的发送程序向检测节点发送d1,d2,……,di,……,dw和窗口数据初始化请求。
[0081] 第四步,检测节点的窗口管理程序接收数据节点发送的d1,d2,……,di,……,dw和窗口数据初始化请求,对滑动窗口进行初始化,具体方法是:
[0082] 4.1检测节点的窗口管理程序接收数据节点发送的d1,d2,……,di,……,dw和窗口数据初始化请求。
[0083] 4.2采用滑动窗口数组SW[]存储滑动窗口中的数据,即由SW[i]存放di。
[0084] 第五步,检测节点的异常检测程序在滑动窗口内进行异常检测,并将检测结果发送给控制节点,具体方法是:
[0085] 5.1采用检测结果二维数组AD存储被检测出的异常数据及其在滑动窗口中的序号,AD[k][1]表示被检测出的第k个异常数据,AD[k][2]表示被检测出的第k个异常数据在滑动窗口中的序号,1≤k≤w。
[0086] 5.2初始化检测结果二维数组AD,具体步骤如下:
[0087] 5.2.1初始化检查结果序号k=1。
[0088] 5.2.2令AD[k][1]=0,AD[k][2]=w+1。
[0089] 5.2.3如果k
[0090] 5.3采用均值偏差法对滑动窗口中的数据进行异常检测,具体步骤如下:
[0091] 5.3.1求滑动窗口数据均值,令滑动窗口数据均值
[0092] 5.3.2求滑动窗口数据标准偏差,令滑动窗口数据标准偏差
[0093] 5.3.3初始化滑动窗口数据序号i=1。
[0094] 5.3.4初始化检测结果序号k=1。
[0095] 5.3.5如果 一般λ≥2,令AD[k][1]=SW[i],AD[k][2]=i,k=k+1。
[0096] 5.3.6如果i
[0097] 5.4将检测结果二维数组AD发送给控制节点。
[0098] 第六步,控制节点的结果回收程序接收检测节点发送的检测结果二维数组AD并返回给用户。
[0099] 第七步,如果控制节点的任务管理程序接收到用户提交的异常检测结束请求,则停止异常检测,转第十步;否则,向数据节点发送窗口数据更新请求,转第八步。
[0100] 第八步,数据节点的发送程序接收控制节点发送的窗口数据更新请求,向检测节点发送窗口更新数据和窗口数据更新请求,具体方法是:
[0101] 8.1数据节点的发送程序接收控制节点发送的窗口数据更新请求。
[0102] 8.2数据节点的接收程序接收采集设备实时采集并发送的s个数据b1,b2,……,bj,……,bs(1≤j≤s),s≤w-1。
[0103] 8.3数据节点的发送程序向检测节点发送b1,b2,……,bj,……,bs和窗口数据更新请求。
[0104] 第九步,检测节点的窗口管理程序检测滑动窗口中是否出现异常爆发,接收数据节点发送的b1,b2,……,bj,……,bs和窗口数据更新请求,并根据检测结果选择不同策略对滑动窗口进行数据更新,具体方法是:
[0105] 9.1检测滑动窗口中是否出现异常爆发,具体步骤如下:
[0106] 9.1.1初始化检测结果序号k=1。
[0107] 9.1.2初始化异常数据数目m=0。
[0108] 9.1.3如果w-s+1≤AD[k][2]≤w,令m=m+1。
[0109] 9.1.4如果AD[k][2]≤w,令k=k+1,转第9.1.3步;否则,转第9.1.5步。
[0110] 9.1.5如果m≤s/2,转第9.2步;否则转第9.3步。
[0111] 9.2接收数据节点发送的b1,b2,……,bj,……,bs和窗口数据更新请求,按照常规方法更新滑动窗口数据,具体步骤如下:
[0112] 9.2.1初始化滑动窗口数据序号i=1。
[0113] 9.2.2令SW[i]=SW[i+s]。
[0114] 9.2.3如果i≤w-s-1,令i=i+1,转第9.2.2步;否则令i=i+1,转第9.2.4步。
[0115] 9.2.4初始化滑动窗口更新数据序号j=1。
[0116] 9.2.5令SW[i]=bj。
[0117] 9.2.6如果i
[0118] 9.3接收数据节点发送的b1,b2,……,bj,……,bs和窗口数据更新请求,按照非常规方法更新滑动窗口数据,具体步骤如下:
[0119] 9.3.1初始化滑动窗口更新数据序号j=1。
[0120] 9.3.2初始化滑动窗口数据序号i=w-s+1。
[0121] 9.3.3令SW[i]=bj。
[0122] 9.3.4如果i
[0123] 第十步,异常检测结束。
高效检索全球专利

专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。

我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。

申请试用

分析报告

专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。

申请试用

QQ群二维码
意见反馈