一种在线文件非法下载检测方法和装置
专利汇可以提供一种在线文件非法下载检测方法和装置专利检索，专利查询，专利分析的服务。并且本 发明 公开了一种在线文件非法下载检测方法和装置，属于计算机技术领域。所述方法包括：获取目标 服务器 文件下载日志并提取特征以表征用户的文件下载行为；基于聚类 算法 结合统计分析获取用户下载行为基线；根据所述用户下载行为基线对用户下载行为的合法性进行检测。采用本发明，可以对文件非法下载行为进行有效检测。，下面是一种在线文件非法下载检测方法和装置专利的具体信息内容。
1.一种在线文件非法下载检测方法，其特征在于，包括：
获取目标服务器文件下载日志并提取特征以表征用户的文件下载行为；
基于聚类算法结合统计分析获取用户下载行为基线；
根据所述用户下载行为基线对用户下载行为的合法性进行检测。
2.根据权利要求1所述在线文件非法下载检测方法，其特征在于，所述获取目标服务器文件下载日志并提取特征以表征用户的文件下载行为，包括：
以下载文件时产生的系统日志为数据源，其中，文件传输协议包括ftp、sftp、smb；
以日志中的客户端IP地址、文件大小、文件名、下载时间为特征来表征用户的文件下载行为。
3.根据权利要求1所述在线文件非法下载检测方法，其特征在于，所述基于聚类算法结合统计分析获取用户下载行为基线，包括：
以每台服务器上的每个客户端IP地址为分析单位，即以每台服务器上的IP所产生的文件下载日志作为训练数据，采用聚类算法进行聚类；
根据聚类结果，针对每个类簇进行统计分析得出用户下载行为基线，即合法下载时间段、合法文件大小区间和合法下载频次。
4.根据权利要求3所述在线文件非法下载检测方法，其特征在于，所述聚类算法进行聚类的具体步骤如下：
步骤1：将每个数据点即每台服务器上的每个客户端IP地址的每条文件下载日志当作一个类簇，并提取日志特征，其特征向量表示为：ci→(ci,1,ci,2)，其中，向量的各个维度分别表示文件下载时间、文件大小；
步骤2：计算两两类簇之间的距离；
步骤3：将距离最小的两个类簇合并为一个类簇；
步骤4：重复步骤2和步骤3，直至满足训练迭代终止条件。
5.根据权利要求4所述在线文件非法下载检测方法，其特征在于，所述计算两两类簇之间的距离，采用如下三种方式之一：
1)Single Linkage，计算方法是将两个组合数据点中距离最近的两个数据点间的距离作为这两个组合数据点的距离；
2)Complete Linkage，计算方法与Single Linkage相反，将两个组合数据点中距离最远的两个数据点间的距离作为这两个组合数据点的距离；
3)Average Linkage，计算方法是计算两个组合数据点中的每个数据点与其他所有数据点的距离，将所有距离的均值作为两个组合数据点间的距离；
所述训练迭代终止条件根据人为参与程度分为以下三种：
1)人为参与，针对每次聚类结果绘制聚类结果图，由专家挑选最符合文件下载行为分布的聚类结果；
2)全自动化，聚类结果的好坏由某种评估指标决定，包括轮廓系数、兰德指数、互信息、标准互信息等；
3)半自动化，基于全自动化结果，由专家挑选最符合文件下载行为分布的聚类结果。
6.根据权利要求3或4或5所述在线文件非法下载检测方法，其特征在于，所述根据聚类结果，针对每个类簇进行统计分析得出用户下载行为基线，即合法下载时间段、合法文件大小区间、合法下载频次，包括：
去除异常点，异常点的判别方法有以下两点：
1)基于先验经验，确定某些文件下载日志记录为非法；
2)基于聚类结果，将异常类簇即该类簇距其它类簇距离较远且类簇中数据量少于一定值视为异常点；
针对每个类簇中的正常点，统计其合法下载时间段，粒度由粗到细分为小时、分钟、秒；
统计其合法文件大小区间，范围在最大最小值的一定范围内上下浮动；
统计其合法下载频次，时间粒度由粗到细分为小时、分钟、秒。
7.根据权利要求1所述在线文件非法下载检测方法，其特征在于，所述根据所述用户下载行为的基线对用户下载行为的合法性进行检测，包括：
对用户下载的文件进行涉敏检查，若为敏感文件则该下载行为视为非法；
针对非敏感文件进行基线比对，若不在基线范围内则将该下载行为视为非法。
8.根据权利要求7所述在线文件非法下载检测方法，其特征在于，所述对用户下载的文件进行涉敏检查，若为敏感文件则该下载行为视为非法，包括：
涉敏检查基于敏感文件名单采用模式匹配的方式对用户下载的文件进行检查，其中敏感文件名单自行指定；
对敏感文件名单进行动态更新，即对敏感文件进行监控，若敏感文件的文件名被修改，则修改后的文件名将作为“新”敏感文件名加入敏感文件名单。
9.一种在线文件非法下载检测装置，其特征在于，所述装置包括：
数据处理模块，用于获取目标服务器文件下载日志并提取特征以表征用户的文件下载行为；
聚类模块，用于基线获取之前给数据分块，使得基线更加细粒度化更加精准；
基线获取模块，用于获取用户下载行为基线；
涉敏检查模块，用于检查用户下载的文件是否为敏感文件；
检测模块，用于检测用户下载行为是否合法。
10.根据权利要求9所述在线文件非法下载检测装置，其特征在于，所述数据处理模块，用于：
以每台服务器上的每个客户端IP地址为分析单位，并提取相应文件下载日志中的下载时间和文件大小作为特征，表征用户的文件下载行为；
所述聚类模块，用于：
确定目标数据的分组状况，使基线粒度更细，更为准确；
去除异常点，确定正常点以用于基线分析；
所述基线获取模块，用于：
针对正常点，确定合法下载时间段，粒度由粗到细分为小时、分钟、秒；确定合法文件大小区间，范围在最大最小值的一定范围内上下浮动；确定合法下载频次，时间粒度由粗到细分为小时、分钟、秒。
一种在线文件非法下载检测方法和装置
技术领域
背景技术
发明内容
具体实施方式
| 标题 | 发布/更新时间 | 阅读量 |
|---|---|---|
| 一种面向中文的预训练方法及系统 | 2020-05-08 | 343 |
| 重复数据的在线删除方法、装置及可读存储介质 | 2020-05-12 | 657 |
| 一种在线文件非法下载检测方法和装置 | 2020-05-13 | 883 |
| 用户设备位置信息上报方法和装置 | 2020-05-14 | 264 |
| 一种基于Zabbix和Docker的监控系统和方法 | 2020-05-13 | 781 |
| 一种日志传输方法、装置及电子设备和存储介质 | 2020-05-13 | 653 |
| 查询结果的确定方法、装置、服务器及存储介质 | 2020-05-08 | 467 |
| 一种面向物联网的可变粒度实时环境数据采集方法 | 2020-05-08 | 478 |
| 用于自动认证在基于网络功能虚拟化(NFV)的通信网络中使用的虚拟网络功能(VNF)的系统、方法和计算机程序 | 2020-05-08 | 803 |
| 数字孪生体构建方法、装置、计算机设备及存储介质 | 2020-05-11 | 832 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台，是提供专利分析，专利查询，专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据，免费查、免费专利分析。
专利汇分析报告产品可以对行业情报数据进行梳理分析，涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度，系统通过AI智能系统对图表进行解读，只需1分钟，一键生成行业专利分析报告。
-
7 水质环境监测系统
