[发明专利]一种客户端数据的采集方法和装置

说明书

本发明实施例提供了一种客户端数据的采集方法和装置，该方法包括：接收客户端发送的数据上传请求；所述上传请求中包括标识信息、长度为第一字符串长度的第一数据；对所述第一数据计算第一特征值；查找是否存储有，基于所述标识信息对应的第二数据生成的特征信息；所述特征信息包括第二特征值、第二字符串长度；当查找到特征信息时，判断所述第一字符串长度与所述字符串长度是否相等；当所述第一字符串长度与所述第二字符串长度相等时，判断所述第一特征值与所述第二特征值是否相同；若是，则拒绝写入所述第一数据；若否，则写入所述第一数据，以覆盖所述第二数据。本发明实施例对数据解析量级进行压缩，大大提高了字符串的校验效率。

技术领域

本发明涉及计算机处理的技术领域，特别是涉及一种客户端数据的采集方法和一种客户端数据的采集装置。

背景技术

随着网络科技的快速发展，越来越多的企业将产品以第三方应用程序(Application，App)的方式移植至各种操作平台上，例如即时通讯工具、电子邮箱、浏览器等等。

应用程序的开发者通常通过采集与第三方应用程序相关的数据进行分析，进一步改进第三方应用程序的设计，以增强用户体验。

在很多情况中，当用户打开应用或进行一些操作时，会进行一些数据的上报，上传信息的频率是比较高的。

若用户未对终端进行调整，如增加应用程序、升级操作系统等等，则可能上报了大量的重复信息，可能会出现在很短的时间内进行多条相同数据的上报情况，使得数据库频繁读取，造成服务器压力过大、解析服务异常等不可控情况，甚至宕机。

发明内容

鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的一种客户端数据的采集方法和相应的一种客户端数据的采集装置。

依据本发明的一个方面，提供了一种客户端数据的采集方法，包括：

接收客户端发送的数据上传请求；所述上传请求中包括标识信息、长度为第一字符串长度的第一数据；

对所述第一数据计算第一特征值；

查找是否存储有，基于所述标识信息对应的第二数据生成的特征信息；所述特征信息包括第二特征值、第二字符串长度；

当查找到特征信息时，判断所述第一字符串长度与所述字符串长度是否相等；

当所述第一字符串长度与所述第二字符串长度相等时，判断所述第一特征值与所述第二特征值是否相同；若是，则拒绝写入所述第一数据；若否，则写入所述第一数据，以覆盖所述第二数据。

可选地，所述对所述第一数据计算第一特征值的步骤包括：

当所述第一字符串长度小于或等于预设的长度阈值时，对所述第一数据中的每个字符计算散列值；

将每个字符的散列值累加，获得第一特征值。

可选地，所述对所述第一数据计算第一特征值的步骤包括：

当所述第一字符串长度大于预设的长度阈值时，按照所述第一字符串长度计算跳跃值；

对所述第一数据中、与所述跳跃值匹配的字符计算散列值；

将与所述跳跃值的字符的散列值累加，获得第一特征值。

可选地，所述按照所述第一字符串长度计算跳跃值的步骤包括：

将所述第一字符串长度除以预设的值获得的余数设置为跳跃值。

可选地，与所述跳跃值匹配的字符为，从第0位字符开始、位置的偏移量为所述跳跃值整数倍的字符。

可选地，该方法还包括：

当未查找到特征信息时，写入所述第一数据；