[发明专利]一种互联网大数据分析提取方法及系统在审
申请号: | 201811315842.0 | 申请日: | 2018-11-07 |
公开(公告)号: | CN109344333A | 公开(公告)日: | 2019-02-15 |
发明(设计)人: | 钟文洪 | 申请(专利权)人: | 乐甜人工智能科技(广州)有限公司 |
主分类号: | G06F16/9535 | 分类号: | G06F16/9535;G06F16/903;G06F16/906;G06F21/60 |
代理公司: | 南京鼎傲知识产权代理事务所(普通合伙) 32327 | 代理人: | 王晶 |
地址: | 511300 广东省广州市增*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 大数据 特征提取 筛选 互联网 分析 加密 存储 采集 模块发送指令 数据采集单元 数据传输单元 数据加密单元 数据筛选模块 数据特征提取 互联网数据 数据安全性 安全性能 工作效率 后台终端 人工成本 数据通过 提取效率 预先设置 准确度 发送 传输 | ||
本发明公开了一种互联网大数据分析提取方法及系统,分析提取方法包括以下步骤:A、数据采集单元采集互联网大数据;B、采集的数据经过数据筛选模块进行筛选后发送至控制单元进行处理;C、控制单元向数据特征提取模块发送指令,对筛选后的数据根据预先设置的关键字进行特征提取;D、特征提取后的数据通过数据加密单元进行加密后存储;E、最后提取后的互联网数据通过数据传输单元传输至后台终端,本发明采用的方法操作简单,安全性能高,另外,通过对数据进行筛选,筛选后进行特征提取,能够提高互联网大数据的分析提取效率和准确度,而且降低了人工成本,提高了工作效率,此外,能够实现对收进行加密后存储,确保了数据安全性。
技术领域
本发明涉及数据提取技术领域,具体为一种互联网大数据分析提取方法及系统。
背景技术
自古以来人们就深知信息的重要性,拥有更多和更精准的信息就能获得优势,随着社会的不断进步,信息越来越多样化,且数量也是成倍的增长,大数据的概念也随之提出,从庞杂的数据中,提取所需的数据进行分析,得到直观的信息,以此来占据先机,获取利益。
大数据,或称巨量数据、海量数据;是由数量巨大、结构复杂、类型众多数据构成的数据集合,是基于云计算的数据处理与应用模式,通过数据的集成共享,交叉复用形成的智力资源和知识服务能力。有研究机构如此定义“大数据”:“大数据”是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。从某种程度上说,大数据是数据分析的前沿技术。简言之,从各种各样类型的数据中,快速获得有价值信息的能力,就是大数据技术。现有技术中互联网大数据分析和提取一般通过互联网数据平台自动进行提取和分析,其虽然能够实现对互联网大数据的提取并分析,但是互联网数据平台功能单一,导致提取效率低,而且安全性能差,容易造成数据泄露,因此,有必要进行改进。
发明内容
本发明的目的在于提供一种互联网大数据分析提取方法及系统,以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:一种互联网大数据分析提取方法,分析提取方法包括以下步骤:
A、数据采集单元采集互联网大数据;
B、采集的数据经过数据筛选模块进行筛选后发送至控制单元进行处理;
C、控制单元向数据特征提取模块发送指令,对筛选后的数据根据预先设置的关键字进行特征提取;
D、特征提取后的数据通过数据加密单元进行加密后存储;
E、最后提取后的互联网数据通过数据传输单元传输至后台终端。
优选的,所述步骤B中数据筛选模块方法如下:
a、从待筛选数据中提取多个噪声数据作为样本数据;
b、对各所述样本数据进行变换处理,得到各所述样本数据的变换数据;
c、通过预先训练好的数据分类模型,对各所述样本数据及各所述变换数据进行标签预测,确定各样本数据的目标标签和目标标签概率;
d、根据各样本数据的目标标签及目标标签概率,对各样本数据进行筛选,获得目标数据。
优选的,所述步骤D中数据加密方法如下:
a、首先对待加密的数据进行清洗操作;
b、之后对清洗后的数据进行AES加密算法运算,得到加密后的一次密文数据;
c、之后对一次密文数据再次进行超混沌加密运算,得到二次密文数据;
d、最后对二次密文数据进行进行DES加密运算,完成对数据的最终加密。
优选的,所述数据特征提取模块特征提取方法如下:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于乐甜人工智能科技(广州)有限公司,未经乐甜人工智能科技(广州)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811315842.0/2.html,转载请声明来源钻瓜专利网。