[发明专利]海量数据处理方法和系统有效
申请号: | 01126714.3 | 申请日: | 2001-09-07 |
公开(公告)号: | CN1407438A | 公开(公告)日: | 2003-04-02 |
发明(设计)人: | 王磊;李屹;郜艳琴 | 申请(专利权)人: | 深圳市中兴通讯股份有限公司上海第二研究所 |
主分类号: | G06F7/22 | 分类号: | G06F7/22;G06F13/00;G06F12/00 |
代理公司: | 深圳市顺天达专利商标代理有限公司 | 代理人: | 郭伟刚 |
地址: | 20023*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及计算机应用系统中的数据采集及处理技术,具体涉及应用系统软件处理海量数据时根据一定特征高效采集相关数据并根据这些特征进行相关的预处理分析的方法。具体包括以下步骤应用系统从数据发生源采集数据,录入原始采集层的数据表中;根据原始数据的特征对数据进行第一次分类;根据数据的属性规则对已分类的数据进行二次分类;将分类后的数据录入中间数据层的数据表中;应用系统直接从中间数据表中采集数据进行进一步的运算;本发明对数据进行两次处理,大大提高了数据分析的效率,进而降低了整个应用系统硬件平台的费用,同时它保证了原始数据的正确性,完备性,减少了应用的重复工作量,使得应用系统的处理速度得到极大的提高。 | ||
搜索关键词: | 海量 数据处理 方法 系统 | ||
【主权项】:
1、一种在应用系统处理海量数据的方法,所述应用系统包括数据发生源、原始数据采集层、特征数据处理层和应用层,其特征在于,包括以下步骤:(1)通过选定的通讯机制,将数据发生源形成的数据传送到原始数据采集层;(2)所述原始数据采集层解析收到的数据并将其存放到所述原始数据采集层的数据表中;(3)访问所述原始数据的特征库,对存放在所述数据表中的原始数据进行特征归并;(4)依据所述特征库特征的属性规则对特征归并后的数据进行预处理,并将预处理后的数据存放到所述特征数据处理层的数据表中;(5)所述应用层访问所述特征数据处理层,将从中采集到的数据作进一步计算处理,将结果整理成可识别的数据包传给应用系统其他模块。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市中兴通讯股份有限公司上海第二研究所,未经深圳市中兴通讯股份有限公司上海第二研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/01126714.3/,转载请声明来源钻瓜专利网。
- 上一篇:一种污水处理的方法
- 下一篇:一种富硒、锗、铬南瓜粉的制作方法