[发明专利]数据调度方法、装置、终端及存储介质

权利要求书

1.一种数据调度方法，其特征在于，包括以下步骤：

获取第一数据，存放至第一位置作为第二数据；

确定所述第一位置的所述第二数据的数据量大于或等于第一判断阈值，则发送第一信息至调度中心；

所述调度中心接收到所述第一信息，根据所述第一信息确定是否生成第一事件，若生成所述第一事件，则发送第一通知给已订阅所述第一事件的第一订阅程序，以使：所述第一订阅程序从所述第一位置提取所述第二数据，处理得到第三数据并存放于第二位置，所述第一订阅程序确定所述第二位置的第三数据的数据量大于或等于第二判断阈值，则发送第二信息至所述调度中心。

2.根据权利要求1所述的数据调度方法，其特征在于，所述获取第一数据，存放至第一位置作为第二数据，包括以下至少一个步骤：

获取第一数据，确定所述第一数据的数据量大于或等于第三判断阈值，划分所述第一数据为一个或多个第一批次数据，存放第一批次数据至第一位置作为第二数据；其中所述第一批次数据的数据量小于或等于第一划分阈值，所述第一划分阈值表征存放所述第一数据到第一位置时每次能够处理的最大数据量；

或者，

获取第一数据，确定所述第一数据的数据量小于所述第三判断阈值，继续获取所述第一数据。

3.根据权利要求1所述的数据调度方法，其特征在于，所述方法还包括：

确定所述第一位置的所述第二数据的数据量小于第一判断阈值，则继续存放所述第一数据到第一位置。

4.根据权利要求1所述的数据调度方法，其特征在于，所述第一订阅程序从所述第一位置提取所述第二数据，处理得到第三数据，包括以下步骤：

确定已订阅所述第一事件的第一订阅程序为清洗数据，则所述第一订阅程序从所述第一位置提取所述第二数据，清洗得到第三数据并存放于第二位置，所述第一订阅程序确定所述第二位置的第三数据的数据量大于第二判断阈值，则发送第二信息至所述调度中心。

5.根据权利要求1所述的数据调度方法，其特征在于，所述第一订阅程序从所述第一位置提取所述第二数据，处理得到第三数据，包括以下步骤：

确定已订阅所述第一事件的第一订阅程序为将数据进行建模，则所述第一订阅程序从所述第一位置提取所述第二数据，将第二数据进行建模得到第三数据并存放于第二位置，所述第一订阅程序确定所述 第二位置的第三数据的数据量大于第二判断阈值，则发送第二信息至所述调度中心。

6.根据权利要求1所述的数据调度方法，其特征在于，包括：

所述调度中心接收到所述第一信息，根据所述第一信息确定是否生成第一事件；

当确定所述调度中心不生成所述第一事件，则获取发送所述第一信息的第一订阅程序，确定第一订阅程序处理得到的第三数据，将所述第三数据进行缓存。

7.根据权利要求1所述的数据调度方法，其特征在于，所述方法还包括：

所述第一订阅程序确定所述第二位置的第三数据的数据量小于第二判断阈值，则继续通过所述第一订阅程序从所述第一位置提取所述第二数据，处理得到第三数据并存放于第二位置。

8.一种数据调度装置，其特征在于，包括：

第一模块，用于获取第一数据，存放至第一位置作为第二数据；

第二模块，用于确定所述第一位置的所述第二数据的数据量大于或等于第一判断阈值，则发送第一信息至调度中心；

第三模块，用于所述调度中心接收到所述第一信息，根据所述第一信息确定是否生成第一事件，若生成所述第一事件，则发送第一通知给已订阅所述第一事件的第一订阅程序，以使：所述第一订阅程序从所述第一位置提取所述第二数据，处理得到第三数据并存放于第二位置，所述第一订阅程序确定所述第二位置的第三数据的数据量大于或等于第二判断阈值，则发送第二信息至所述调度中心。