[发明专利]测试环境的年终损益统计文件处理方法及装置

说明书

本发明实施例公开了一种测试环境的年终损益统计文件处理方法及装置，可用于金融领域或其他技术领域，该方法包括：获取处理参数，处理参数包含：处理的文件名称、处理的时间范围以及在所述处理的时间范围内的N个拆分时间点；确定出符合处理的时间范围的所有子文件；若处理的时间范围存在跨越日期的情况，则对符合所述处理的时间范围的所有子文件进行重命名；根据N个拆分时间点将重命名后的所有子文件拆分成N+1个批次加载的文件清单，并根据N+1个批次加载的文件清单进行N+1个批次的年终损益统计处理。本发明解决了在测试环境中模拟统计年终损益时出现的文件名重复的问题。

技术领域

本发明涉及年终损益统计技术领域，具体而言，涉及一种测试环境的年终损益统计文件处理方法及装置。

背景技术

各大商业银行在年终时，会对一年的营收进行计算，来统计一年的损益情况。为了提高年终损益的计算准确度及时效性，年终最后一天(12月31日)的数据会通过kafka以每一分钟的频度下传给下游进行统计，下传文件按照分钟数进行命名，例如10:01分下传的文件就命名为601(10×60+1)，下游按照固定的拆分逻辑将所有涉及年终损益统计计算的文件拆分成多个批次进行加载，进而进行多批次的损益统计。为了提高年终损益统计的准确性和可用性，通常会在测试环境中对年终损益统计进行模拟。

在测试环境中存储了大量的用于测试的年终损益统计文件，年终损益统计文件包括多种文件，以文件名称进行区别，每种文件下的所有文件按照日期分为多个日期文件夹，日期文件夹中存储对应日期的文件(在下文中称为子文件)，每个文件夹中的所有文件(即子文件)按照分钟数进行命名。目前在测试环境中，只是为了测试整个链路是否畅通，对具体数据的准确度要求不高。所以在目前的测试环境中，由于文件命名是以分钟命名的，测试环境会将多个自然日期的数据加载到统一的批量日期中，会存在文件名重复的问题。这将会影响测试的结果，可能会导致年终损益的统计结果不准确。

发明内容

本发明为了解决在测试环境中模拟统计年终损益时出现的文件名重复的问题，提出了一种测试环境的年终损益统计文件处理方法及装置。

为了实现上述目的，根据本发明的一个方面，提供了一种测试环境的年终损益统计文件处理方法，该方法包括：

获取处理参数，其中，所述处理参数包含：处理的文件名称、处理的时间范围以及在所述处理的时间范围内的N个拆分时间点，N为正整数；

确定出所述处理的文件名称对应的文件中符合所述处理的时间范围的所有子文件，其中，所述处理的文件名称对应的文件中包含多个日期文件夹，每个日期文件夹中包含该日期对应的所有子文件，每个所述子文件以分钟进行命名；

若所述处理的时间范围存在跨越日期的情况，则根据每个所述子文件所在的日期文件夹对符合所述处理的时间范围的所有子文件进行重命名；

根据N个拆分时间点将重命名后的所有子文件拆分成N+1个批次加载的文件清单，并根据N+1个批次加载的文件清单进行N+1个批次的年终损益统计处理。

可选的，所述处理参数还包含：批量日期；

所述测试环境的年终损益统计文件处理方法，还包括：

将重命名后的所有子文件迁移到所述处理的文件名称对应的文件中的所述批量日期对应的日期文件夹中。

可选的，根据N个拆分时间点将重命名后的所有子文件拆分成N+1个批次加载的文件清单，具体包括：

根据N个拆分时间点的时间先后顺序，依次用每个拆分时间点对重命名后的所有子文件进行拆分，将所有子文件拆分成N+1个批次加载的文件清单。

可选的，根据N个拆分时间点将重命名后的所有子文件拆分成N+1个批次加载的文件清单，具体包括：

在每拆分出一个批次加载的文件清单之后，将拆分出的该批次加载的文件清单中的所有空文件去除。