专利汇可以提供一种基于服务器封包镜像的反爬系统专利检索,专利查询,专利分析的服务。并且本 发明 提供了一种基于 服务器 封包镜像的反爬系统,其特点在于通过对服务器接收到的全量 请求 封包进行镜像复制,在旁路中将封包还原为用户请求,在与服务器分离的反爬分析中心及策略中心内对用户请求进行爬虫特征识别,以上过程不会对服务器正常工作过程产生影响,服务器根据策略中心的识别结果对请求做出相应的处理。通过使用网络层面的请求复制技术,不影响现有系统的运行,并且SDK部署稳定,不需要在策略变化时 修改 和发布程序,同时,反爬策略可以实时得到更新,令服务器的反爬效果得到及时的升级。,下面是一种基于服务器封包镜像的反爬系统专利的具体信息内容。
1.一种服务器反爬系统,其特征在于,通过对服务器全量请求数据封包进行镜像复制后,在旁路中进行重组还原为原始请求数据,然后针对复制的请求数据进行恶意爬虫的行为特征分析,此分析方式不会对现有应用系统的请求处理过程产生影响。
2.如权利要求1所述的系统,其特征在于,该系统包含了镜像模块、重组筛选模块、反爬行为分析中心与策略中心以及用于应用程序与策略中心通讯的SDK:
镜像模块用于复制服务器端全量请求封包数据单元;
重组筛选模块用于将复制后的请求封包数据单元重新组合还原为原始请求,并筛选其中有必要监控的部分请求;
反爬行为中心模块包含恶意爬虫识别算法,对请求特征进行分析产生对应反爬策略;
反爬策略中心模块包含的是反爬规则,并向应用程序通过SDK提供通讯接口,辅助应用程序进行恶意爬虫识别;
SDK实现应用程序与策略中心对于反爬策略的请求、执行与结果响应。
3.如权利要求1所述的系统,其特征在于,利用如权利要求2所述的模块结构进行组织,并通过以下步骤实现反爬过程:
S1,封包后发送至服务器的的流式请求数据传输单元,在到达服务器网关时,通过流量复制的方式,将全量封包进行复制,而原始请求正常进入到S2步骤,复制后的封包进入到S3步骤;
S2,原始请求封包正常进入服务器端进行处理,服务器端将使用SDK中的相应通讯接口函数,携带此请求的特征参数,向反爬策略中心发送分析请求,反爬策略中心针对此请求的特征参数结合反爬规则进行运算分析,给出爬虫行为判定结果反馈服务器端,服务器端根据此结果对此请求进行正常响应或抛弃处理;
S3,镜像复制后的封包,在旁路中经过封包重组,还原为原始请求数据格式,并筛选其中发往目标应用程序服务器的有必要监控的请求,将请求数据整理后,发送至反爬行为分析中心,分析结果用于更新和完善反爬策略中心的识别规则,应用服务器将从反爬策略中心请求到最新的反爬策略。
4.一种服务器反爬系统,采用如权利要求1-3中任一项或多项组合的方法实现反爬过程。
标题 | 发布/更新时间 | 阅读量 |
---|---|---|
基于磁流变阻尼器的弹射器后坐缓冲装置的控制方法 | 2020-05-08 | 247 |
基于CDN和MEC的车联网移动性管理方法 | 2020-05-08 | 180 |
智慧工地安全事件快速响应方法、存储介质和系统 | 2020-05-11 | 885 |
无线通信系统中执行上行链路传输的方法及装置 | 2020-05-08 | 371 |
无线网桥连网方法及装置 | 2020-05-08 | 981 |
时钟同步的调整方法及装置 | 2020-05-08 | 968 |
自组网的建网方法 | 2020-05-08 | 277 |
向用户的账户发放资源的方法、装置及存储介质 | 2020-05-11 | 184 |
用于不动产网络借贷的多对一出借人代表确定系统及方法 | 2020-05-11 | 458 |
通信装置及介质波导滤波器 | 2020-05-08 | 957 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。
专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。