[发明专利]数据装载方法、装置、设备及存储介质

权利要求书

1.一种数据装载方法，其特征在于，应用于数据仓库系统，所述数据仓库系统根据数据文件对数据表进行数据装载，所述方法包括：

获取数据表的作业计划列表，所述作业计划列表包括多个作业计划，所述多个作业计划中每个作业计划对应有数据文件；

在所述多个作业计划中，确定目标作业计划；

若所述目标作业计划对应的数据文件不存在，则确定所述目标作业计划对应的数据文件的等待时间是否小于或等于预设时间；

若所述目标作业计划对应的数据文件的等待时间小于或等于预设时间，则在所述数据表的预设装载策略指示能够跳过所述目标作业计划的情况下，跳过所述目标作业计划，并在所述多个作业计划中，确定新的目标作业计划。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

若所述目标作业计划的数据文件的等待时间小于或等于预设时间，则在所述数据表的预设装载策略指示不能够跳过所述目标作业计划的情况下，将所述目标作业计划的状态记录为未完成，并结束。

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

确定所述数据表的类型，所述数据表的类型包括主档类型和明细类型；

若所述数据表的类型为主档类型，则确定所述数据表的预设装载策略为不能够跳过所述目标作业计划；

若所述数据表的类型为明细类型，则确定所述数据表的预设装载策略为能够跳过所述目标作业计划。

4.根据权利要求1-3任一项所述的方法，其特征在于，所述目标作业计划的数据文件对应有接收时间，所述接收时间为所述数据仓库系统对所述数据文件首次进行接收的时间，则所述在所述多个作业计划中，确定目标作业计划，包括：

若所述数据表的预设装载策略指示按照从早到晚的数据文件时间的顺序进行数据装载，则将所述多个作业计划中最早接收时间对应的作业计划，确定为目标作业计划；

相应的，所述在所述多个作业计划中，确定新的目标作业计划，包括：

将所述多个作业计划中次早接收时间对应的作业计划，确定为新的目标作业计划。

5.根据权利要求1-3任一项所述的方法，其特征在于，所述目标作业计划的数据文件对应有接收时间，所述接收时间为所述数据仓库系统对所述数据文件首次进行接收的时间，则所述在所述多个作业计划中，确定目标作业计划，包括：

若所述数据表的预设装载策略指示按照最新接收到的数据文件进行数据装载，则将所述多个作业计划中最新接收时间对应的作业计划，确定为目标作业计划；

相应的，所述在所述多个作业计划中，确定新的目标作业计划，包括：

将所述多个作业计划中次新接收时间对应的作业计划，确定为新的目标作业计划。

6.根据权利要求1-3任一项所述的方法，其特征在于，所述方法还包括：

若所述目标作业计划对应的数据文件的等待时间大于预设时间，则将所述目标作业计划的状态记录为超时，并发送告警信息。

7.一种数据装载装置，其特征在于，应用于数据仓库系统，所述数据仓库系统根据数据文件对数据表进行数据装载，所述装置包括：

获取模块，用于获取数据表的作业计划列表，所述作业计划列表包括多个作业计划，所述多个作业计划中每个作业计划对应有数据文件；

确定模块，用于在所述多个作业计划中，确定目标作业计划；

确定模块，还用于若所述目标作业计划对应的数据文件不存在，则确定所述目标作业计划对应的数据文件的等待时间是否小于或等于预设时间；

确定模块，还用于若所述目标作业计划对应的数据文件的等待时间小于或等于预设时间，则在所述数据表的预设装载策略指示能够跳过所述目标作业计划的情况下，跳过所述目标作业计划，并在所述多个作业计划中，确定新的目标作业计划。

8.根据权利要求7所述的装置，其特征在于，所述装置还包括：

记录模块，用于若所述目标作业计划的数据文件的等待时间小于或等于预设时间，则在所述数据表的预设装载策略指示不能够跳过所述目标作业计划的情况下，将所述目标作业计划的状态记录为未完成，并结束。