[发明专利]作业控制方法及服务器

说明书

本发明实施例公开了一种作业控制方法及服务器，方法包括：任务调度服务器接收第一批处理服务器在执行批处理作业时每处理完n行数据后发送的中间数据，所述中间数据包括：所述n行数据的脏数据以及所述脏数据的元数据信息；任务调度服务器存储所述中间数据；任务调度服务器判断所述第一批处理服务器执行的批处理作业故障时，选择执行所述批处理作业的第二批处理服务器；任务调度服务器将所述批处理作业故障前最后一次接收到的中间数据发送至所述第二批处理服务器，作为所述第二批处理服务器重启所述批处理作业的参考数据。本发明实施例能够缩短因为服务器故障带来的批处理作业重新运行的时间开销，提高批处理作业的执行效率。

技术领域

本发明涉及通信领域，尤其涉及一种作业控制方法及服务器。

背景技术

大型机(Mainframe computer)是由IBM公司最早发明的大型计算机，由于其强大的处理能力和优越的可靠性，主要用于证券、基金、股票、能源等行业的核心应用。

由于大型机的购买和维护费用高昂、新业务应用开发周期长、专业技术人员数量稀少、以及小型机和X86服务器的性能和可靠性逐步提升等相关原因，目前，已有大量的大型机客户正在评估或实施将业务从大型机迁移到小型机或X86服务器上。

大型机的业务主要分为联机交易(online)和批处理(batch)两大类。批处理作业一般用于大数据量的集中处理，一个典型的例子是，银行为某大型企业的所有员工代发工资。从这个例子可以总结出批处理作业的一些特点：数据量和计算量大(一家大型企业的员工以万计)、业务处理流程相同(核算和转账工资)、周期性(代发工资业务在每个月的固定日期触发)。批处理作业一般有一个时间窗口(Time Window)，在某个时间段(比如00：00到4：00之间)内，所有的批处理作业必须执行完成。在时间窗口内，批处理作业未执行完成的，可能会影响后续业务的正常开展。

由于X86服务器发展较晚等原因，其可靠性没有大型机那么优秀，比如大型机的可用性通常能达到99.999％，这意味着在一年的时间里，大型机意外停机的时间不超过5.3分钟；如果X86服务器的可用性为99.99％，这意味着它一年内意外停机的时间为53分钟。因此，由X86服务器替换大型机所形成的X86系统中，由于X86服务器意外宕机给批处理作业时间窗口带来的影响更大。当把业务从大型机迁移到X86系统中，尤其需要关注可靠性带来的影响。

当批处理作业从大型机迁移到X86系统时，如果批处理作业故障，需要从批处理作业的第一个步骤开始执行，成功的步骤也需要重新执行。对不同的批处理作业来说，有的作业执行时间短，有的作业执行时间长；对同一个批处理作业来说，有的步骤执行时间短，有的步骤执行时间长。很显然，执行时间短的作业或步骤重新执行带来的时间开销低，执行时间长的作业或步骤重新执行带来的时间开销高。当系统因为软硬件故障宕机时，批处理作业在执行时间长的作业、步骤的概率明显更大，因此当批处理作业需要重新运行时，带来的时间开销往往是很大的，这也影响着批处理作业的执行效率。

发明内容

本发明实施例中提供了一种作业控制方法及服务器，能够缩短因为服务器故障带来的批处理作业重新运行的时间开销，提高批处理作业的执行效率。

第一方面，本发明实施例提供一种作业控制方法，包括：

任务调度服务器接收第一批处理服务器在执行批处理作业时每处理完n行数据后发送的中间数据，所述中间数据携带：所述n行数据的脏数据以及所述脏数据的元数据信息；n为自然数；

所述任务调度服务器存储所述中间数据；

所述任务调度服务器判断所述批处理作业执行失败时，选择重新执行所述批处理作业的第二批处理服务器；

所述任务调度服务器将所述批处理作业执行失败前所述任务调度服务器最后一次接收到的中间数据发送至所述第二批处理服务器，作为所述第二批处理服务器重启所述批处理作业的参考数据。