[发明专利]数据采集方法、装置、电子设备和可读存储介质

说明书

本发明实施例公开了一种数据采集方法、装置、电子设备和可读存储介质，所述方法包括获取监控事件信息，根据用户标识、监控事件信息和预定的埋点采样率确定所述监控事件信息的上报属性，响应于所述上报属性为被选中上报，基于至少一种方式上报所述监控事件信息，由此能够减少监控事件信息在上报过程中的数据丢失，提高监控事件信息上报的稳定性和准确性以及监控事件信息上报的效率。

技术领域

本发明涉及计算机技术领域，具体涉及一种数据采集方法、装置、电子设备和可读存储介质。

背景技术

目前的移动设备(也即客户端)的用户量大、用户需求多样，且应用场景丰富，如何采集和利用这些移动设备产生的数据对于分析用户行为和需求对于提高优化运营手段、丰富运营行为和提高用户体验具有重要意义。

发明内容

有鉴于此，本发明实施例提供一种数据采集方法、装置、电子设备和可读存储介质，在采集用户数据的同时，能够提高数据采集的稳定性和准确性。

第一方面，本发明实施例提供一种数据采集方法，应用于客户端，所述方法包括：

获取监控事件信息；

根据用户标识、监控事件信息和预定的埋点采样率确定所述监控事件信息的上报属性；

响应于所述上报属性为被选中上报，基于至少一种方式上报所述监控事件信息。

进一步地，所述基于至少一种方式上报所述监控事件信息包括：

实时上报所述监控事件信息；以及

基于监控事件队列以打包方式上报所述监控事件信息。

进一步地，所述监控事件包括业务事件和系统事件，所述业务事件用于表征业务使用方定义的事件，所述系统事件用于表征所述业务内部定义的事件。

进一步地，所述方法还包括：

在实时上报所述监控事件信息的同时将所述监控事件信息缓存至本地文件。

进一步地，所述方法还包括：

响应于所述监控事件信息上报成功，删除所述本地文件。

进一步地，所述基于监控事件队列以打包方式上报所述监控事件信息包括：

构建事件队列，所述事件队列用于存储所述监控事件信息；

响应于所述事件队列中的监控事件达到预设数量，打包所述监控事件对应的监控事件信息；

将所述打包后的监控事件信息发送至服务器。

进一步地，所述打包所述监控事件对应的监控事件信息包括：

创建事件记录，所述事件记录用于表征待打包监控事件对应的公共属性；

打包所述事件记录和对应的监控事件信息。

进一步地，所述将所述打包后的监控事件信息发送至服务器包括：

对所述打包后的监控事件信息进行压缩，并将所述压缩后的监控事件信息发送至服务器。

进一步地，所述根据用户标识、监控事件信息和预定的埋点采样率确定所述监控事件信息的上报属性包括：

确定所述用户标识和监控事件标识组合形成的哈希值；

对所述哈希值与预设值作取模运算；

根据所述取模运算结果与埋点采样率确定所述监控事件信息的上报属性。

进一步地，所述根据所述取模运算结果与埋点采样率确定所述监控事件信息的上报属性包括：