[发明专利]一种基于linux的crontad和jar包实现定时校验数据源的方法

说明书

本发明公开了一种基于linux的crontad和jar包实现定时校验数据源的方法。本方法具体为：配置linux系统的的定时任务crontab，在定时任务中配置所要执行的shell脚本；shell脚本中编写执行脚本的shell命令，调用jar包，并传入相应的参数；根据传入的参数去请求获取数据源数据的第三方接口，获取数据；数据传入对应的方法中；判断执行结果是否为空，为空的话则没有异常数据，不发送钉钉群消息，不为空的话则有异常数据，发送钉钉群消息。本发明的有益效果是：解决了对于数据源字段较多，且数据结构复杂的情况下，数据提供方对数据做修改的时候的校验及感知问题，且可以将有问题的数据通知到钉钉的群中，以便于通知相关用户可以及时的检查该数据源数据的变动。

技术领域

本发明涉及java应用与测试开发相关技术领域，尤其是指一种基于linux的crontad和jar包实现定时校验数据源的方法。

背景技术

为了确保业务的正常，需要确保第三方数据源的数据的可靠性，而对于部分返回数据结构复杂且字段繁多的数据源，无法做到定期的去校验检查该数据源的字段或数据结构是否有变化。

发明内容

本发明是为了克服现有技术中存在上述的不足，提供了一种能够定期检验检查的基于linux的crontad和jar包实现定时校验数据源的方法。

为了实现上述目的，本发明采用以下技术方案：

一种基于linux的crontad和jar包实现定时校验数据源的方法，具体包括如下步骤：

（1）配置执行shell脚本时所用到的命令，在linux系统/etc/profile配置JAVA_HOME，在linux系统/root/.bash_profile配置JAVA_HOME和命令的所在路径；

（2）编辑linux系统中的/etc/crontab文件，设置定时任务，任务中包括执行shell脚本的时间，时间精确到分钟和所要执行的shell脚本的名称，以及执行shell脚本时产生日志的路径和文件名；

（3）编写shell脚本，在shell脚本开头编写执行步骤（1）中的文件及命令，紧接着编写执行jar包的命令，并将所需的参数紧跟在执行jar包命令之后，其中多个参数中间用空格隔开；

（4）jar包执行的时候默认执行的是jar包中的main方法，main方法所接收的参数是步骤（3）所输入的参数；

（5）main方法根据参数将会去请求第三方获取数据源数据的接口，获取相应数据源的数据；

（6）main方法在步骤（5）获取到数据后，会根据步骤（3）所传入的参数，路由到对应的数据校验的方法中；

（7）数据源校验的方法中，首先根据预期的数据结构和传入的数据源进行比对，传入的数据源中存在预期的数据结构则将该条记录去掉；

（8）验证关键字段的数据类型及数据范围，将关键字段按照相应的数据结构取出，然后校验取出字段的数据类型和数据范围，数据类型和数据范围不是符合预期的话，则将该字段记录下来；

（9）判断步骤（7）和步骤（8）的记录中是否为空，不为空的话，发送消息到预警的群中，发送的消息包括步骤（7）和步骤（8）中的记录；为空的话，不会发送消息。