[发明专利]一种管理数据的方法和系统有效
申请号: | 201711464034.6 | 申请日: | 2017-12-28 |
公开(公告)号: | CN108228101B | 公开(公告)日: | 2022-03-15 |
发明(设计)人: | 郝海生;王锋 | 申请(专利权)人: | 北京盛和大地数据科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京华智则铭知识产权代理有限公司 11573 | 代理人: | 陈向敏 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 管理 数据 方法 系统 | ||
本发明公开了一种管理数据的方法和系统,属于数据存储技术领域。所述方法包括:管理服务器接收目标非结构化数据的数据存储请求,将所述目标非结构化数据传输给存储服务器,所述存储服务器根据预设的特征提取标准,提取所述目标非结构化数据的特征信息,生成目标特征文件,所述存储服务器将所述目标特征文件存储至热存储区,并将所述目标非结构化数据存储至冷存储区。采用本发明,可以提高数据管理的效率。
技术领域
本发明涉及数据存储技术领域,特别涉及一种管理数据的方法和系统。
背景技术
随着计算机、互联网和数字媒体等技术的进一步发展,以文本、图形、图像、音频、视频等非结构化数据为主的信息急剧增加。非结构化数据是指数据结构不规则或不完整,没有预定义的数据模型,无法通过数据库二维逻辑表来表现的数据。
非结构化数据一般存储在数据管理系统中的存储服务器的磁盘阵列上或闪存阵列上。数据管理系统的管理服务器接收到外界对于某非结构化数据的检索或分析等数据管理请求后,可以先从数据管理系统的存储服务器中获取非结构化数据,然后管理服务器可以对非结构化数据进行特征提取与分析等数据管理处理,再向外界反馈上述处理结果。
在实现本发明的过程中,发明人发现现有技术至少存在以下问题:
非结构化数据的数据量很大,在对其进行数据管理的过程中,存储服务器和管理服务器间的非结构化数据的传输将占用大量的带宽资源与计算资源,且需要花费大量传输时间,故而,数据管理的效率较低。
发明内容
为了解决现有技术的问题,本发明实施例提供了一种管理数据的方法和系统。所述技术方案如下:
第一方面,提供了一种管理数据的方法,所述方法包括:
管理服务器接收目标非结构化数据的数据存储请求,将所述目标非结构化数据传输给存储服务器;
所述存储服务器根据预设的特征提取标准,提取所述目标非结构化数据的特征信息,生成目标特征文件;
所述存储服务器将所述目标特征文件存储至热存储区,并将所述目标非结构化数据存储至冷存储区。
可选的,所述存储服务器根据预设的特征提取标准,提取所述目标非结构化数据的特征信息,生成目标特征文件,包括:
所述存储服务器获取所述目标非结构化数据的数据属性;
所述存储服务器根据预设的所述数据属性对应的特征提取标准,提取所述目标非结构化数据的特征信息,生成目标特征文件。
可选的,所述目标特征文件中的特征信息的数据格式与所述目标非结构化数据的数据格式相同或者不同。
可选的,所述方法还包括:
所述管理服务器获取数据查询请求,将其中携带的查询关键信息发送给存储服务器;
所述存储服务器确定与所述查询关键信息相符的可选特征信息,并查找所述可选特征信息所属的可选特征文件;
所述存储服务器将所述可选特征文件反馈给所述管理服务器。
可选的,所述方法还包括:
如果不存在与所述查询关键信息相符的可选特征信息,所述存储服务器则确定所述查询关键信息的相似特征信息;
所述存储服务器查找所述相似特征信息所属的相似特征文件,并将所述相似特征文件反馈给所述管理服务器。
可选的,所述存储服务器将所述目标非结构化数据存储至冷存储区之后,还包括:
如果所述目标非结构化数据的优先级大于预设优先级,所述存储服务器则在所述热存储区同时存储所述非结构化数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京盛和大地数据科技有限公司,未经北京盛和大地数据科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711464034.6/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置