[发明专利]一种基于文件监控和消息推送的实时同步系统

摘要

本发明公开了一种基于文件监控和消息推送的实时同步系统，包括本地文件监控组件：适配Windows、MAC、Linux操作系统，实时捕获用户对本地文件系统的操作；推送服务组件：维护云端与本地客户端之间的长连接，将云端的数据变动实时推送到本地；内核数据库组件：记录云端文件和本地文件的基本元数据，用于文件当前状态和历史版本的比较，从而计算出文件差异；同步组件：根据本地与云端的文件系统的差异，自动将本地修改上传到云端，并且将云端的变动同步到本地。本发明可以全自动运行，并且能实时同步百万级别文件数量，免去了人工下载和上传文件的麻烦，从而极大地方便用户使用云服务来管理文件数据。

主权项

1.一种基于文件监控和消息推送的实时同步系统，其特征在于，包括，本地文件监控组件，所述本地文件监控组件适配不同的操作系统，用于实时捕获用户在本地操作系统中的用户操作；推送服务组件，所述推送服务组件用以维护云端与本地客户端之间的长连接，以及将云端的数据变动实时推送到本地；内核数据库组件，所述内核数据库组件用以记录云端文件和本地文件的基本元数据，以及对文件进行当前状态和历史版本的比较，计算出本地与云端文件的差异；同步组件，所述同步组件用以根据本地与云端的文件的差异，自动将本地修改上传到云端，并且将云端的变动同步到本地；所述推送服务组件包括：RabbitMQ消息队列，用于创建两个先进先出FIFO队列；ActionQueue操作队列和FailedActionQueue操作失败队列，所述ActionQueue用于保存用户需要推送的操作消息；所述FailedActionQueue用于保存在异步处理过程中推送失败的消息；异步消息处理器，用于从ActionQueue中提取用户的操作消息，并且获取推送对象和消息主体；HBase集群，用于根据用户ID为索引值，存储需要推送给每个用户的消息，以及持久化推送消息；Web集群，所述Web集群用以提供Web服务器接口；RealTime集群，用以从所述HBase集群中取得需要推送的所有未推送的消息，并将其推送给用户，所述 RealTime集群包括HAProxy和实时推送节点， 所述HAProxy用于均衡每个实时推送节点上的压力，进行负载均衡； 以及通过访问HAProxy，获取实时推送节点的URL；再通过WebSocket协议创建与所述实时推送节点之间的长连接； 所述实时推送节点采用Netty作为通讯引擎；本地文件监控组件还用于监控得到的数据中存在需要被忽略掉的以下四类文件：系统文件的创建、删除、修改；隐藏文件；临时文件；无法执行的操作。