[发明专利]一种分布式系统数据收集方法及数据签名生成方法

摘要

本发明提供了一种分布式系统数据收集方法，对更新的文件内容，根据流量控制逻辑按照配置拆分为2个以上部分，每个部分分别调用加密函数，将数据加密后进行上报；所述流量控制逻辑为：根据用户配置的最大传输单元，将需要上报的所有数据进行分段，然后针对每段分别调用签名函数，为数据生成签名，将签名追加到数据的末尾。与现有技术相比，能够保证分布式的采集数据的同时，不会对系统带宽造成过大压力，日志系统最大保全，同时还能够提供一定程度的信息安全保障。

主权项

一种分布式系统数据收集方法，具体方法为：应用系统启动完成后，初始化一个单独的数据采集模块线程负责应用系统的数据输出；应用系统每次调用数据采集接口时，调用一个写入线程，并立即返回写入请求；写入线程调用操作系统的文件读写接口，将数据写入到配置的本地磁盘目录中；每隔一定的设置时间通过文件的操作接口，查询所述配置的目的磁盘目录下的所有文件，如果文件中的内容有更新，则根据流量控制逻辑按照配置拆分为2个以上部分，每个部分分别调用加密函数，将数据加密后进行上报；所述流量控制逻辑为：根据用户配置的最大传输单元，将需要上报的所有数据进行分段，然后针对每段分别调用签名函数，为数据生成签名，将签名追加到数据的末尾；所述为数据生成签名的具体签名生成方法步骤为：A1、将所有要发送的非空参数值的参数按照参数名字典序排序，使用键值对的格式拼接成字符串；A2、在上述拼接成的字符串最后拼接上加密密钥；A3、步骤二最后拼接成的字符串最后拼接上时间戳，完成数据的签名；或，B1、将所有要发送的非空参数值的参数按照参数名字典序排序，使用键值对的格式拼接成字符串；B2、在上述拼接成的字符串最后拼接上加密密钥；B3、步骤二最后拼接成的字符串最后拼接上时间戳；B4、对步骤三最后拼接成的字符串进行MD5运算，再将得到MD5值字符串所有字符转换为大写，得到 sign 值，完成数据的签名；或，C1、将所有要发送的非空参数值的参数按照参数名字典序排序，使用键值对的格式拼接成字符串；C2、在上述拼接成的字符串最后拼接上加密密钥；C3、对步骤二最后拼接成的字符串进行MD5运算，再将得到MD5值字符串所有字符转换为大写，得到 sign 值，完成数据的签名；接收到加密后的数据后，将数据本身与签名进行分离，然后根据签名生成方法对数据的签名进行验签；其中，如果签名生成方法中，存在拼接时间戳的步骤，则获取当前服务器时间分别生成前一个时间片、当前时间片和后一个时间片对应的签名，与数据带来的签名进行对比，如果能够匹配上则接受数据并放到存放数据的地方，否则将数据直接丢弃；所述时间片的生成方法与时间戳的设置相对应。