[发明专利]基于Nginx的数据收集系统及方法有效
申请号: | 201811379664.8 | 申请日: | 2018-11-20 |
公开(公告)号: | CN109861958B | 公开(公告)日: | 2022-08-16 |
发明(设计)人: | 龙向辉 | 申请(专利权)人: | 新疆福禄网络科技有限公司 |
主分类号: | H04L9/40 | 分类号: | H04L9/40;H04L67/02;H04L1/00 |
代理公司: | 深圳市恒程创新知识产权代理有限公司 44542 | 代理人: | 赵爱蓉 |
地址: | 844000 新疆维吾尔自治区喀什地区*** | 国省代码: | 新疆;65 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 nginx 数据 收集 系统 方法 | ||
本发明公开了一种基于Nginx的数据收集系统及方法,该系统包括Nginx服务器及客户端;其中,所述客户端,用于获取待收集数据,根据所述待收集数据生成数据请求,将所述数据请求通过HTTP方式发送至所述Nginx服务器;所述Nginx服务器,用于将接收的数据请求存储至日志数据中,对所述日志数据进行分析,获得待收集数据。本发明技术方案Nginx的数据收集系统实现数据收集,极大的提高了Nginx服务器的并发能力,同时占用的系统资源减少,也降低了成本。
技术领域
本发明涉及数据收集技术领域,尤其涉及一种基于Nginx的数据收集系统及方法。
背景技术
随着信息时代的发展,很多情况下需要收集各类数据进行分析,而目前的数据收集系统大多都是基于各种高级语言(Java,C#...)开发出数据收集的API接口,提供给客户端使用。若对于大量的数据请求,要求API接口的并发能力非常高,同时需要解决高并发等一系列问题,这样会使得并发成本也相应地提高。因此,急需一种数据收集系统来解决上述技术问题。
上述内容仅用于辅助理解本发明的技术方案,并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提供一种基于Nginx的数据收集系统及方法,旨在解决目前数据收集系统要求并发能力高,占用系统资源大,成本增加的技术问题。
为实现上述目的,本发明提供一种基于Nginx的数据收集系统,所述基于Nginx的数据收集系统包括Nginx服务器及客户端;其中,
所述客户端,用于获取待收集数据,根据所述待收集数据生成数据请求,将所述数据请求通过HTTP方式发送至所述Nginx服务器;
所述Nginx服务器,用于将接收的数据请求存储至日志数据中,对所述日志数据进行分析,获得待收集数据。
优选地,所述客户端,还用于建立与所述Nginx服务器之间的HTTP通信连接,通过所述HTTP通信连接将所述数据请求发送预设次数至所述Nginx服务器。
优选地,所述客户端,还用于对所述待收集数据进行加密,获得加密数据;对所述加密数据添加校验码,以生成对应的数据请求;
所述Nginx服务器,还用于通过所述校验码对所述加密数据进行校验,并将校验成功的加密数据进行解密,以将解密获得的待收集数据存储至日志数据中。
优选地,所述客户端采用非对称加密对所述待收集数据进行加密,获得加密数据;
所述Nginx服务器采用所述非对称加密的解密方法对所述加密数据进行解密,获得解密后的待收集数据。
优选地,所述校验码中包含数据顺序信息;其中,
所述客户端,还用于对所述加密数据添加包含数据顺序信息的校验码,以生成对应的数据请求;
所述Nginx服务器,还用于接收所述数据请求,按照所述数据顺序信息对所述加密数据进行排序,通过所述校验码对所述加密数据进行校验,将有重复数据顺序信息的所述加密数据进行删除,并对校验失败的所述加密数据进行删除,以获得校验成功的所述加密数据。
本发明还提出一种基于Nginx的数据收集方法,所述基于Nginx的数据收集方法包括以下步骤:
客户端获取待收集数据,根据所述待收集数据生成数据请求,将所述数据请求通过HTTP方式发送至所述Nginx服务器;
Nginx服务器将接收的所述数据请求存储至日志数据中,对所述日志数据进行分析,获得待收集数据。
优选地,所述客户端获取待收集数据,根据所述待收集数据生成数据请求,将所述数据请求通过HTTP方式发送至所述Nginx服务器,具体包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于新疆福禄网络科技有限公司,未经新疆福禄网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811379664.8/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置