[发明专利]监控数据的处理方法及装置

说明书

技术领域

本发明涉及数据处理领域，具体而言，涉及一种监控数据的处理方法及装置。

背景技术

随着智能化生产的发展，越来越多的工业生产可实现智能控制。为了使智能控制更加精确，需要提高对智能化生产过程的监控的细致程度，因此需要布设成千上万的监控点来实施监控。规模越大的智能化生产，其需要布设的监控点将越多。同时，为了更加及时的了解到每个监控点的数据变化，对每个监控点均以秒为单位并且以固定的时间间隔进行数据采集，由此带来大规模的采集产生的监控数据。传统的数据处理方式一般为直接保存每次采样的监控数据到磁盘上，这种数据处理方式仅能满足于监控点较少的情况，随着智能化生产中需要布设的监控点越来越多，数据处理面临着越来越大的挑战，对数据保存的I/O瓶颈将成为该数据处理方式的最大瓶颈。其中，I/O为input/output的简称，即为输入/输出设备。

针对上述的保存大规模监控数据时存储效率低的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种监控数据的处理方法及装置，以至少解决保存大规模监控数据时存储效率低的技术问题。

根据本发明实施例的一个方面，提供了一种监控数据的处理方法，该处理方法包括：获取各个监控点的第一监控数据；分别对各个监控点的第一监控数据进行过滤，得到第二监控数据；保存第二监控数据至数据库。

进一步地，分别对各个监控点的第一监控数据进行过滤，得到第二监控数据包括：获取各个监控点的预设过滤条件，其中，预设过滤条件基于对应的监控点对应的数据类型而预先设置的；分别使用各个监控点的预设过滤条件对各个监控点的第一监控数据进行过滤，得到第二监控数据。

进一步地，分别使用各个监控点的预设过滤条件对各个监控点的第一监控数据进行过滤，得到第二监控数据包括：判断监控点的当前时刻的第一监控数据的值与上一时刻的第一监控数据的值是否不同，其中，当前时刻与上一时刻间隔预设时间；若当前时刻的第一监控数据的值与上一时刻的第一监控数据的值不同，判断当前时刻的第一监控数据与上一时刻的第一监控数据的差值是否大于监控点的预设阈值；若当前时刻的第一监控数据与上一时刻的第一监控数据的差值大于预设阈值，判断出当前时刻的第一监控数据满足监控点的预设过滤条件，保留当前时刻的第一监控数据得到第二监控数据。

进一步地，在获取各个监控点的预设过滤条件之前，处理方法还包括：获取各个监控点对应的数据类型，其中，监控点对应的数据类型用于指示监控点所采集数据的重要级别；基于各个监控点对应的数据类型设置各个监控点的预设过滤条件，其中，数据类型相同的监控点的预设过滤条件相同，若第一监控点对应的数据类型所指示的重要级别高于第二监控点对应的数据类型所指示的重要级别，则设置给第一监控点的预设过滤条件中的预设阈值小于设置给第二监控点的预设过滤条件中的预设阈值，监控点包括第一监控点和第二监控点。

进一步地，在基于各个监控点对应的数据类型设置各个监控点的预设过滤条件之前，处理方法包括：设置各个监控点的访问标识；在基于各个监控点对应的数据类型设置各个监控点的预设过滤条件之后，处理方法还包括：记录各个监控点、监控点的访问标识以及监控点的预设过滤条件之间的对应关系。

进一步地，保存第二监控数据至数据库包括：将第二监控数据保存入内存数据库；每隔预设时间段以事务的方式将内存数据库中存储的数据存入磁盘数据库。

进一步地，在获取各个监控点的第一监控数据之后，处理方法包括：在接收到第一访问请求之后，输出第一监控数据；在得到第二监控数据之后，处理方法包括：在接收到第二访问请求之后，输出第二监控数据。

根据本发明实施例的一个方面，提供了一种监控数据的处理装置，该处理装置包括：第一获取模块，用于获取各个监控点的第一监控数据；过滤模块，用于分别对各个监控点的第一监控数据进行过滤，得到第二监控数据；

保存模块，用于保存第二监控数据至数据库。

进一步地，过滤模块包括：第二获取模块，用于获取各个监控点的预设过滤条件，其中，预设过滤条件基于对应的监控点对应的数据类型而预先设置的；过滤子模块，用于分别使用各个监控点的预设过滤条件对各个监控点的第一监控数据进行过滤，得到第二监控数据。