[发明专利]一种非结构化数据的处理方法及防复制加密传输系统

说明书

本发明公开了一种非结构化数据的处理方法及防复制加密传输系统，包括以下步骤：获取非结构化数据；确定非结构化数据的解析方式；将非结构化数据转化为结构化数据；将结构化数据进行分类，并将结构化数据分为有用数据和无用数据；将有用的数据进行存储，将无用的数据进行删除；将存储的数据进行备份，并进行加密处理；检验储存数据是否有误；如果数据正确，则用户后期可调取数据进行统计、分析；如果数据错误，则重复步骤d至步骤g，直到数据正确。本发明，在收集数据并实现结构化之后，消除无用的数据可以进一步减少混淆，避免浪费时间，且减少存储空间的占用；通过备份数据，可避免数据丢失。

技术领域

本发明涉及非结构化数据处理技术领域，具体是一种非结构化数据的处理方法及防复制加密传输系统。

背景技术

在信息技术飞速发展的今天，人们在各种社会和经济活动中产生大量的数字信息，企业信息技术基础设施建设规模不断扩大，IT监控、运维系统也得到广泛运用，同时各种传感器、智能家电产生的数据，以及各种交易系统(证券交易系统、电子商务交易系统)产生的数据数量巨大，格式也不尽相同，很难得到利用。

非结构化数据是计算机或人生成的文本信息，其中的数据并不一定遵循标准的数据结构(如模式定义规范的行和列)，不容易被计算机程序直接理解和利用。将非结构化数据转化为结构化数据后，可存入搜索引擎、SQL(Structured Query Language，结构化查询语言)、NoSQL(Not Only SQL，非关系型数据)等系统，做进一步分析。大部分商业智能(Business Intelligence)软件只能分析基于数据库的结构化数据。例如Oracle数据库通过运算符合并智能数据类型和优化数据结构，以分析和操作XML(Exteile Marku Laguage，扩展性标识语言)文档、多媒体内容、文本和地理空间信息等非结构化数据。

当今的非结构化数据的处理方式主要是模板匹配法，将现有的非结构化数据与已经完成处理的模板进行对比，从而找到最相似的模板，从中提取出相应有用的信息，但这种方法在处理大量非结构化数据时耗时长，并且没有那么大的模板库与之相应匹配。

发明内容

本发明的目的在于提供一种非结构化数据的处理方法及防复制加密传输系统，以解决现有技术中的问题。

为实现上述目的，本发明提供如下技术方案：一种非结构化数据的处理方法，包括以下步骤：

步骤a：获取非结构化数据；

步骤b：确定非结构化数据的解析方式；

步骤c：将非结构化数据转化为结构化数据；

步骤d：将结构化数据进行分类，并将结构化数据分为有用数据和无用数据；

步骤e：将有用的数据进行存储，将无用的数据进行删除；

步骤f：将存储的数据进行备份，并进行加密处理；

步骤g：检验储存数据是否有误；

步骤h：如果数据正确，则用户后期可调取数据进行统计、分析；如果数据错误，则重复步骤d至步骤g，直到数据正确。

优选的，步骤a中所述非结构化数据为图像、音频、视频、文档、自定义对象、XML或HTML。

优选的，还包括处理器和存储模块，处理器用于编辑解析方式，存储模块用于存储数据。

优选的，所述解析方式是将非结构化数据进行序列化处理，从而得到结构化数据。

优选的，一种非结构化数据的处理方法的防复制加密传输系统，包括数据库、用户登录模块、权限管理模块，还包括以下步骤：

步骤i：用户登录；

步骤j：用户身份识别；