[发明专利]一种数据采集软件的数据处理方法及装置

说明书

本发明涉及一种数据处理的技术领域，揭露了一种数据采集软件的数据处理方法，包括：配置数据采集软件的参数信息，建立数据采集传输连接；根据所建立的数据传输连接，利用数据自适应采集算法进行数据采集；对于所采集到的数据，利用基于时序变动特征的数据描述方法得到采集数据的变动趋势；利用基于聚类的自编码器数据融合方式进行采集数据的聚类融合，得到采集数据的融合数据；利用结合量子粒子群的数据整理算法进行融合数据的整理。本发明还提供了一种数据采集软件的数据处理系统。本发明实现了数据的采集处理。

技术领域

本发明涉及数据处理的技术领域，尤其涉及一种数据采集软件的数据处理方法及装置。

背景技术

目前，随着大数据时代的来临，各类数据采集需求在不断增长，如何更为高效实现数据的采集处理，成为当前研究的热门话题。

由于各类智能设备数据传输协议、格式各异，导致每种设备的数据采集都需要有针对性的做适配开发，采集设备无法复用，造成二次开发的复杂性；数据采集量增长也会造成数据传输带宽增长，并增加云端压力。

鉴于此，如何利用数据采集软件实现数据的自适应采集，成为本领域技术人员亟待解决的问题。

发明内容

本发明提供一种数据采集软件的数据处理方法，通过利用数据自适应采集算法进行数据采集，并利用基于聚类的自编码器数据融合方式进行采集数据的聚类融合，最终利用结合量子粒子群的数据整理算法进行融合数据的整理。

为实现上述目的，本发明提供的一种数据采集软件的数据处理方法，包括：

配置数据采集软件的参数信息，建立数据采集传输连接；

根据所建立的数据传输连接，利用数据自适应采集算法进行数据采集；

对于所采集到的数据，利用基于时序变动特征的数据描述方法得到采集数据的变动趋势；

利用基于聚类的自编码器数据融合方式进行采集数据的聚类融合，得到采集数据的融合数据；

利用结合量子粒子群的数据整理算法进行融合数据的整理。

可选地，所述配置数据采集软件的参数信息，包括：

1)利用函数getWanDeviceCfgValue()获取数据采集软件配置信息，主要读取配置文件中的配置信息，并将这些配置字符串信息转化成可用格式的数据，在本发明一个具体实施例中，所述配置信息包括IP，端口、用户名、密码等；

2)获取本地MAC地址，进行MD5激活验证，比对成功则视为设备已授权成功，比对失败则表示授权失败，将无法建立连接；

3)进行连接请求，此模式采取TCP三次握手连接，客户端与服务端通过socket通道进行通信；

4)在建立连接之后，本地创建新的线程，专门用于设备心跳的传输；在本发明实施例中，心跳周期初始化为5s传输一次，如果配置界面已经配置了心跳周期，将根据实际配置发送；

在本发明一个实施例中，如若有底层设备的数据共享，本发明将采集到的全局缓存采用JSON格式进行数据转换，得到一个固定的JSON格式数据串具体格式为：{‘data_task’:’xxxxx’,’result’:{‘key’:’value’}}，然后再通过TCP协议的socket通道发送到服务器。

可选地，所述利用数据自适应采集算法进行数据采集，包括：

1)获取第一个数据采集的时间t₀，将其作为初始时间，并设置斜率初始值；

2)保存第一个数据点，以此点为基准，并初始化，记录数值value₀；

3)等待下一个数据点到来的时间t′，并记录数值value′；