[发明专利]一种违规日志处理方法、装置和计算机可读存储介质

权利要求书

1.一种违规日志处理方法，其特征在于，包括：

从通信组件中提取违规日志集，并将所述违规日志集存储在第一缓存中；

对所述第一缓存中的所述违规日志集进行水平切分处理，得到各个违规日志信息，分别将各个所述违规日志信息存储在对应的第二缓存中；

根据所述第二缓存的违规日志信息确定对应的消息处理线程；

对各个所述消息处理线程进行管理，以便并发对所述第二缓存的违规日志信息进行处理；

其中，对各个所述消息处理线程进行管理，以便并发对所述第二缓存的违规日志信息进行处理之后，包括：

记录各个所述消息处理线程的处理信息；若各个所述处理信息达到预设条件，则获取更新消息处理线程；当各个所述消息处理线程处理完成后，对新的违规日志集进行新的水平切分处理，以便利用所述更新消息处理线程并发对所述新的违规日志集对应的违规日志进行处理；

其中，当所述预设条件为消息处理线程的压力极限阈值时，则所述更新消息处理线程是在原有的消息处理线程的基础上增加新的消息处理线程而得到的消息处理线程；当所述预设条件是消息处理线程的空闲极限阈值时，则所述更新消息处理线程是在原有的消息处理线程的基础上减少对应的消息处理线程而得到的消息处理线程。

2.根据权利要求1所述的违规日志处理方法，其特征在于，对所述第一缓存中的所述违规日志集进行水平切分处理，得到各个违规日志信息，分别将各个所述违规日志信息存储在对应的第二缓存中，包括：

根据各个主机信息将所述违规日志集进行水平切分处理，得到各个所述违规日志信息，其中，所述主机信息是所述违规日志集中的违规日志对应的主机信息；

分别将各个所述违规日志信息存储在对应的所述第二缓存中。

3.根据权利要求1所述的违规日志处理方法，其特征在于，对各个所述消息处理线程进行管理，以便并发对所述第二缓存的违规日志信息进行处理，包括：

利用并发容器对各个所述消息处理线程进行管理，以便并发对所述第二缓存的违规日志信息进行处理。

4.根据权利要求3所述的违规日志处理方法，其特征在于，利用并发容器对各个所述消息处理线程进行管理，包括：

判断ConcurrentHashMap中是否存在未处理的违规日志信息；

若是，则确定所述未处理的违规日志信息的key；

将所述未处理的违规日志信息放入与所述key对应的阻塞队列。

5.一种违规日志处理装置，其特征在于，包括：

第一缓存模块，用于从通信组件中提取违规日志集，并将所述违规日志集存储在第一缓存中；

第二缓存模块，用于对所述第一缓存中的所述违规日志集进行水平切分处理，得到各个违规日志信息，分别将各个所述违规日志信息存储在对应的第二缓存中；

确定模块，用于根据所述第二缓存的违规日志信息确定对应的消息处理线程；

第一处理模块，用于对各个所述消息处理线程进行管理，以便并发对所述第二缓存的违规日志信息进行处理；

记录模块，用于记录各个所述消息处理线程的处理信息；

更新消息处理线程获取模块，用于若各个所述处理信息均达到预设条件，则获取更新消息处理线程；

第二处理模块，用于当各个所述消息处理线程处理完成后，对新的违规日志集进行新的水平切分处理，以便利用所述更新消息处理线程并发对所述新的违规日志集对应的违规日志进行处理；

其中，当所述预设条件为消息处理线程的压力极限阈值时，则所述更新消息处理线程是在原有的消息处理线程的基础上增加新的消息处理线程而得到的消息处理线程；当所述预设条件是消息处理线程的空闲极限阈值时，则所述更新消息处理线程是在原有的消息处理线程的基础上减少对应的消息处理线程而得到的消息处理线程。

6.根据权利要求5所述的违规日志处理装置，其特征在于，所述第二缓存模块包括：

切分单元，用于根据各个主机信息将所述违规日志集进行水平切分处理，得到各个所述违规日志信息，其中，所述主机信息是所述违规日志集中的违规日志对应的主机信息；

第二缓存单元，用于分别将各个所述违规日志信息存储在对应的所述第二缓存中。