首页 / 专利库 / 资料储存系统 / 大数据 / 一种移动互联网大数据处理系统及其处理方法

一种移动互联网大数据处理系统及其处理方法

阅读:135发布:2020-05-08

专利汇可以提供一种移动互联网大数据处理系统及其处理方法专利检索,专利查询,专利分析的服务。并且本 发明 公开了 大数据 管理技术领域的一种移动互联网大 数据处理 系统及其处理方法,所述一种移动互联网大 数据处理系统 ,包括数据文件处理系统、数据文件管理系统和原文件数据 云 存储系统;所述数据文件处理系统,用于获取待处理文件,并对文件数据编码后对所述原文件数据云存储系统中存储,再将编码后的文件数据进行格式转换;所述原文件数据云存储系统,用于分类存储处理前文件数据的编码信息以及原文件数据,本发明通过利用文件编码技术,可以在大数据文件进行格式转换时,添加编码信息,进而在转换完成后,实现对原文件数据的快速查询,从而降低了转换文件在原文件丢失时的溯源难度。,下面是一种移动互联网大数据处理系统及其处理方法专利的具体信息内容。

1.一种移动互联网大数据处理系统,其特征在于:包括数据文件处理系统、数据文件管理系统和原文件数据存储系统;
所述数据文件处理系统,用于获取待处理文件,并对文件数据编码后对所述原文件数据云存储系统中存储,再将编码后的文件数据进行格式转换;
所述原文件数据云存储系统,用于分类存储处理前文件数据的编码信息以及原文件数据;
所述数据文件管理系统,用于输入转换完成后的文件数据对所述原文件数据云存储系统进行原文件数据信息的查询。
2.根据权利要求1所述的移动互联网大数据处理系统,其特征在于:所述数据文件处理系统包括数据文件获取模、数据文件编码模块和格式转换模块;
所述数据文件获取模块,用于获取用户需要格式转换的文件数据;
所述数据文件编码模块,用于对获取的待转换文件进行编码处理,并存储至所述原文件数据云存储系统中;
所述格式转换模块,用于将通过所述数据文件编码模块的编码文件进行格式转换且保留编码信息。
3.根据权利要求2所述的移动互联网大数据处理系统,其特征在于:所述数据文件编码模块包括文件格式类型获取模块、格式通道识别模块和文件自动上传模块;
所述文件格式类型获取模块,用于获取编码后的文件数据的格式类型;
所述格式通道识别模块,用于识别上传至所述原文件数据云存储系统的对应格式上传通道;
所述文件自动上传模块,用于通过所述格式通道识别模块的识别通道对所述原文件数据云存储系统进行数据上传。
4.根据权利要求3所述的移动互联网大数据处理系统,其特征在于:所述原文件数据云存储系统包括有与所述文件自动上传模块相对应的存储分类模块和数据存储库模块;
所述存储分类模块,用于对通过不同通道上传的文件进行云端分类;
所述数据存储库模块,用于对分类文件进行永久存储。
5.根据权利要求1所述的移动互联网大数据处理系统,其特征在于:所述数据文件管理系统包括文件查询模块和编码数据提取模块;
所述文件查询模块,用于输入带有编码信息的格式转换后文件数据信息;
所述编码数据提取模块,用于提取待查询文件中的编码信息并对所述原文件数据云存储系统对对应编码的原文件进行查询。
6.根据权利要求5所述的移动互联网大数据处理系统,其特征在于:所述原文件数据云存储系统还包括有与所述编码数据提取模块相对应的编码查询模块、编码存储模块和文件数据下载模块;
所述编码查询模块,用于通过所述编码数据提取模块提取的编码信息对所述编码存储模块中的对应文件编码进行查询;
所述编码存储模块,用于存储对应存储原文件数据的编码数据;
所述文件数据下载模块,用于在查询到对应编码后对存储的编码文件进行云端下载。
7.一种移动互联网大数据处理系统的处理方法,其特征在于,包括如下步骤:
步骤一、获取原文件数据,并将原文件数据进行编码后云存储;
步骤二、将步骤一中编码后的文件数据进行格式转换,获得转换格式的文件数据,且转换后的文件数据保留编码数据;
步骤三、将带有编码数据的转换后文件数据对其编码数据提取对云存储库查询,找到对应编码的原文件数据。

说明书全文

一种移动互联网大数据处理系统及其处理方法

技术领域

[0001] 本发明涉及大数据管理技术领域,具体为一种移动互联网大数据处理系统及其处理方法。

背景技术

[0002] 大数据是指无法在一定时间内用常规软件工具对其内容进行抓取、管理和处理的数据集合。大数据有五大特点,即大量、高速、多样、低价值密度、真实性。它并没有统计学的抽样方法,只是观察和追踪发生的事情。
[0003] 现有的对大数据进行格式转换处理时,由于一旦进行转换并在转换完成后,无法通过转换数据信息对原文件数据信息进行溯源,给数据的转换处理带来了很多的不便。

发明内容

[0004] 本发明的目的在于提供一种移动互联网大数据处理系统及其处理方法,以解决上述背景技术中提出的现有的对大数据进行格式转换处理时,由于一旦进行转换并在转换完成后,无法通过转换数据信息对原文件数据信息进行溯源的问题。
[0005] 为实现上述目的,本发明提供如下技术方案:一种移动互联网大数据处理系统,包括数据文件处理系统、数据文件管理系统和原文件数据存储系统;
[0006] 所述数据文件处理系统,用于获取待处理文件,并对文件数据编码后对所述原文件数据云存储系统中存储,再将编码后的文件数据进行格式转换;
[0007] 所述原文件数据云存储系统,用于分类存储处理前文件数据的编码信息以及原文件数据;
[0008] 所述数据文件管理系统,用于输入转换完成后的文件数据对所述原文件数据云存储系统进行原文件数据信息的查询。
[0009] 优选的,所述数据文件处理系统包括数据文件获取模、数据文件编码模块和格式转换模块;
[0010] 所述数据文件获取模块,用于获取用户需要格式转换的文件数据;
[0011] 所述数据文件编码模块,用于对获取的待转换文件进行编码处理,并存储至所述原文件数据云存储系统中;
[0012] 所述格式转换模块,用于将通过所述数据文件编码模块的编码文件进行格式转换且保留编码信息。
[0013] 优选的,所述数据文件编码模块包括文件格式类型获取模块、格式通道识别模块和文件自动上传模块;
[0014] 所述文件格式类型获取模块,用于获取编码后的文件数据的格式类型;
[0015] 所述格式通道识别模块,用于识别上传至所述原文件数据云存储系统的对应格式上传通道;
[0016] 所述文件自动上传模块,用于通过所述格式通道识别模块的识别通道对所述原文件数据云存储系统进行数据上传。
[0017] 优选的,所述原文件数据云存储系统包括有与所述文件自动上传模块相对应的存储分类模块和数据存储库模块;
[0018] 所述存储分类模块,用于对通过不同通道上传的文件进行云端分类;
[0019] 所述数据存储库模块,用于对分类文件进行永久存储。
[0020] 优选的,所述数据文件管理系统包括文件查询模块和编码数据提取模块;
[0021] 所述文件查询模块,用于输入带有编码信息的格式转换后文件数据信息;
[0022] 所述编码数据提取模块,用于提取待查询文件中的编码信息并对所述原文件数据云存储系统对对应编码的原文件进行查询。
[0023] 优选的,所述原文件数据云存储系统还包括有与所述编码数据提取模块相对应的编码查询模块、编码存储模块和文件数据下载模块;
[0024] 所述编码查询模块,用于通过所述编码数据提取模块提取的编码信息对所述编码存储模块中的对应文件编码进行查询;
[0025] 所述编码存储模块,用于存储对应存储原文件数据的编码数据;
[0026] 所述文件数据下载模块,用于在查询到对应编码后对存储的编码文件进行云端下载。
[0027] 本发明还提供了一种移动互联网大数据处理系统的处理方法,包括如下步骤:
[0028] 步骤一、获取原文件数据,并将原文件数据进行编码后云存储;
[0029] 步骤二、将步骤一中编码后的文件数据进行格式转换,获得转换格式的文件数据,且转换后的文件数据保留编码数据;
[0030] 步骤三、将带有编码数据的转换后文件数据对其编码数据提取对云存储库查询,找到对应编码的原文件数据。
[0031] 与现有技术相比,本发明的有益效果是:本发明通过利用文件编码技术,可以在大数据文件进行格式转换时,添加编码信息,进而在转换完成后,实现对原文件数据的快速查询,从而降低了转换文件在原文件丢失时的溯源难度。附图说明
[0032] 为了更清楚地说明本发明实施例的技术方案,下面将对实施例描述所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
[0033] 图1为本发明的整体系统构架示意图;
[0034] 图2为本发明数据文件编码模块和原文件数据云存储系统的系统分图;
[0035] 图3为本发明原文件数据云存储系统盒编码数据提取模块的系统分图;
[0036] 图4为本发明的方法流程示意图。

具体实施方式

[0037] 下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
[0038] 请一并参阅图1到图3,本发明提供了一种技术方案:一种移动互联网大数据处理系统,包括数据文件处理系统、数据文件管理系统和原文件数据云存储系统;
[0039] 所述数据文件处理系统,用于获取待处理文件,并对文件数据编码后对所述原文件数据云存储系统中存储,再将编码后的文件数据进行格式转换;
[0040] 所述原文件数据云存储系统,用于分类存储处理前文件数据的编码信息以及原文件数据;
[0041] 所述数据文件管理系统,用于输入转换完成后的文件数据对所述原文件数据云存储系统进行原文件数据信息的查询。
[0042] 需要说明的是,在对大数据文件进行格式转换时,为了实现对转换后文件对原文件信息的查询,可以先通过数据文件处理系统输入原文件信息先对文件编制唯一编码,再存储至云存储系统中,并且再对添加编码信息的原文件进行格式转换获取转换文件,并且在需要查询转换文件所对应的原文件信息时,可以直接输入转换文件至数据文件管理系统中,实现对指定编码的查询,再将指定编码对源文件数据云存储系统进行查找,从而找到与编码信息相对应的原文件信息,防止了因格式转换后的原文件数据信息丢失。
[0043] 更进一步的实施方式为,所述数据文件处理系统包括数据文件获取模块、数据文件编码模块和格式转换模块;
[0044] 所述数据文件获取模块,用于获取用户需要格式转换的文件数据;
[0045] 所述数据文件编码模块,用于对获取的待转换文件进行编码处理,并存储至所述原文件数据云存储系统中;
[0046] 所述格式转换模块,用于将通过所述数据文件编码模块的编码文件进行格式转换且保留编码信息;
[0047] 通过对数据文件的获取后,通过对文件数据进行编码后,一份存入至云端存储,另一份进行格式转换,并且转换后的文件仍然保留其编码数据。
[0048] 更进一步的实施方式为,所述数据文件编码模块包括文件格式类型获取模块、格式通道识别模块和文件自动上传模块;
[0049] 所述文件格式类型获取模块,用于获取编码后的文件数据的格式类型;
[0050] 所述格式通道识别模块,用于识别上传至所述原文件数据云存储系统的对应格式上传通道;
[0051] 所述文件自动上传模块,用于通过所述格式通道识别模块的识别通道对所述原文件数据云存储系统进行数据上传;
[0052] 通过获取文件的格式类型,通过与其对应的文件格式通道进行上传,可以有效的提高文件上传效率。
[0053] 更进一步的实施方式为,所述原文件数据云存储系统包括有与所述文件自动上传模块相对应的存储分类模块和数据存储库模块;
[0054] 所述存储分类模块,用于对通过不同通道上传的文件进行云端分类;
[0055] 所述数据存储库模块,用于对分类文件进行永久存储;
[0056] 通过对上传文件进行分类完成后再进行存储,可以实现数据存储的有序进行。
[0057] 更进一步的实施方式为,所述数据文件管理系统包括文件查询模块和编码数据提取模块;
[0058] 所述文件查询模块,用于输入带有编码信息的格式转换后文件数据信息;
[0059] 所述编码数据提取模块,用于提取待查询文件中的编码信息并对所述原文件数据云存储系统对对应编码的原文件进行查询;
[0060] 通过输入转换后的文件,对其文件编码信息查询,可以实现对云端存储的对应编码文件进行快速查找。
[0061] 更进一步的实施方式为,所述原文件数据云存储系统还包括有与所述编码数据提取模块相对应的编码查询模块、编码存储模块和文件数据下载模块;
[0062] 所述编码查询模块,用于通过所述编码数据提取模块提取的编码信息对所述编码存储模块中的对应文件编码进行查询;
[0063] 所述编码存储模块,用于存储对应存储原文件数据的编码数据;
[0064] 所述文件数据下载模块,用于在查询到对应编码后对存储的编码文件进行云端下载;
[0065] 可以在云端查询相对应的文件编码信息,对指定编码的文件数据查找和下载,可以便于实现转换文件与原文件之间的快速转换。
[0066] 请参阅图4,如图4所示,本发明还提供了一种移动互联网大数据处理系统的处理方法,包括如下步骤:
[0067] 步骤一、获取原文件数据,并将原文件数据进行编码后云存储;
[0068] 步骤二、将步骤一中编码后的文件数据进行格式转换,获得转换格式的文件数据,且转换后的文件数据保留编码数据;
[0069] 步骤三、将带有编码数据的转换后文件数据对其编码数据提取对云存储库查询,找到对应编码的原文件数据;
[0070] 通过获取原文件数据对文件进行编码后的文件转换处理,可以便于实现在文件转换处理完成后对原文件信息查找时,直接通过编码信息实现对转换文件与对应原文件之间的相互转换,提高了对转换文件的溯源效率。
[0071] 在本说明书的描述中,参考术语“一个实施例”、“示例”、“具体示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
[0072] 以上公开的本发明优选实施例只是用于帮助阐述本发明。优选实施例并没有详尽叙述所有的细节,也不限制该发明仅为所述的具体实施方式。显然,根据本说明书的内容,可作很多的修改和变化。本说明书选取并具体描述这些实施例,是为了更好地解释本发明的原理和实际应用,从而使所属技术领域技术人员能很好地理解和利用本发明。本发明仅受权利要求书及其全部范围和等效物的限制。
高效检索全球专利

专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。

我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。

申请试用

分析报告

专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。

申请试用

QQ群二维码
意见反馈