[发明专利]数据存储装置和数据存储方法

说明书

技术领域

本发明涉及数据处理技术领域，具体而言，涉及一种数据存储装置和一种数据存储方法。

背景技术

目前的网络流量监控系统通过SNMP服务获取数据，然后使用RRD环形数据库存储和更新数据，当用户需要查看数据时，可以调用RRDTool生成图进行查看。因此RRD环形数据库作为数据容器，其容量大小直接影响RRDTool生成图表的时间范围和数据精度两项重要性能指标。由于RRD文件使用固定大小的空间来存储数据，并有一个指针指向最新的数据的位置，当所有可用位置都被用过后，该循环过程会自动重新使用已使用过的位置，这导致已使用过的位置的数据被覆盖，无法实现在一个RRD文件内保存大量数据不丢失。

目前存在两种方案，可以分别解决大时间范围和数据高精度的问题，但无法有效平衡这两者的关系。

1．降低时间范围，利用不同的RRD文件存储数据。

由于RRD文件使用固定大小的空间来存储数据，不存在类似关系型数据库自动扩容的功能，所以根据实际需要，可以牺牲时间范围，保证精度，即将一个大数据分别存储在多个RRD文件内，以满足高精度的要求，但RRDTool无法解决针对多个RRD文件的生成图表的问题。

2．降低数据精度，利用相同的RRD文件存储数据。

由于RRD文件使用固定大小的空间来存储数据，不存在类似关系型数据库自动扩容的功能，所以根据实际需要，可以牺牲精度，保证时间范围，即将一个大数据进行均匀抽取后，将抽取出的数据存储在一个RRD文件内，以满足大时间范围的要求，但RRDTool生成图表的精度较低。

因此，需要一种新的数据存储技术，能够在根据存储数据生成图表时，同时满足图表的数据精度和时间范围两项指标，便于用户进行查看。

发明内容

本发明正是基于上述问题，提出了一种数据存储技术，能够在根据存储数据生成图表时，同时满足图表的数据精度和时间范围两项指标，便于用户进行查看。

有鉴于此，本发明提出了一种数据存储装置，包括：存储文件创建单元，用于根据多个预设时间范围分别创建相应的存储文件；实时数据获取单元，用于获取实时数据，并将所述实时数据存储至中转文件；数据存储单元，用于从所述中转文件中获取数据，并根据所述数据的时间所在的时间范围，将所述数据存储至与所述时间范围对应的存储文件。

在该技术方案中，存储文件可以是RRD文件，中转文件可以是.TXT格式的文件，在对系统进行监控时，可以通过SNMP（Simple Network Management Protocol，简单网络管理协议）实时获取系统数据，然后将获取到的数据以分布式存储的方式（比如以Key-Value的格式）存储至中转文件，由于存储文件根据预设时间范围创建，每一个预设时间范围可以对应一个存储文件，当从中转文件中读取数据存储至存储文件时，可以根据数据的时间所在的时间范围将该数据存储至相应的存储文件，避免了将所有数据存储在一个存储文件中而造成数据覆盖，或将数据均匀抽取再进行存储而导致精度降低，从而在根据这些存储文件查询数据绘制图表时，可以根据需要查询数据的时间范围从相应的存储文件中获取数据，而相应的存储文件中存储的数据可以包括用户所需查询的时间范围内的全部数据（一般为一年的数据或两年的数据），进而在调用RRDTool生成图表时，可以同时保证图表的数据精度和时间范围。

根据本发明的又一方面，还提出了一种数据存储方法，包括：步骤202，根据多个预设时间范围分别创建相应的存储文件；步骤204，获取实时数据，并将所述实时数据存储至中转文件；步骤206，从所述中转文件中获取数据，根据所述数据的时间所在的时间范围，将所述数据存储至与所述时间范围对应的存储文件。