[发明专利]一种车辆的大量数据无缝更新方法

说明书

本发明公开了一种车辆的大量数据无缝更新方法，包括如下步骤：1）将数据系统的目标表改造为基于更新标识的分区表；2）新建用于存储待更新数据的临时表；临时表与目标表结构相同；3）数据系统判断是否发生异常，如果没有发生异常，则将待更新数据插入临时表；4）数据系统判断是否发生异常，如果没有发生异常，则用临时表与目标表进行交换分区，完成数据更新；如果发生异常，则删除临时表。本发明通过设立与目标表结构相同的临时表，用临时表与目标表进行交换分区，完成数据更新；能够保障数据更新过程中数据的完整性、关联性和逻辑自洽性；还能大幅度缩短数据更新的时间，显著提高系统的数据处理、数据交换的效率。

技术领域

本发明涉及车辆自动驾驶数据交换领域，尤其涉及一种车辆的大量数据无缝更新方法。

背景技术

在信息系统处理数据过程中，经常会遇到需要向关系型数据库中更新或写入大量数据的情形，如自动驾驶车辆，在驾驶工程中，会产生海量的数据，需要不断向相关数据库中更新或输入大量数据。

现有技术中，如CN113434523A公开的-基于大数据的业务数据更新方法、装置、设备及存储介质的发明专利申请文件中，介绍了一种大量数据的更新方法，主要包括：接收业务数据更新请求，业务数据更新请求包括用户基本信息、渠道类型信息和业务类型信息；根据渠道类型信息，获取渠道类型信息对应的目标渠道包，目标渠道包包括原始业务类；基于适配器模式，通过原始业务类将业务数据更新请求转接至业务类型信息对应的目标业务类；基于用户基本信息和目标业务类进行业务数据更新操作，得到操作结果，并将操作结果对应的业务消息推送到终端；其能提高业务数据的同步更新效率，并提高业务数据的可维护性。

按照该专利方案，在具体更新数据时容易出现以下几个问题：

1、大量数据的更新或插入慢。由于数据的体量大，IO操作频繁，无法在一个相对较短时间内完成，数据更新较慢；

2、涉及多表的更新，无法做到在同一时刻上的数据从事务上保证数据的完整性、关联性和逻辑自洽性。例如：具备明细和汇总关系的两张表同时导入大量数据，无法保证在导入过程中，明细表和汇总表之间的总分关系，让前台业务人员对整个数据的计算准确性产生疑问。又例如：用户信息被拆分成了用户基本信息和用户扩展信息表，两张表同时导入大量数据的时候，用户的ID可能只出现在用户扩展信息表中，而在用户基本信息表中不存在，造成逻辑上的矛盾。

3、由于执行时间长，大大增加了数据更新期间发生各种未知意外的可能性，此时数据已经部分进入数据库，整个任务由于数据量太大而无法回滚，导致数据库中出现大量脏数据，可能导致数据的准确性降低。

发明内容

针对现有技术存在的上述不足，本发明的目的是提供一种车辆的大量数据无缝更新方法，以能保障数据更新过程中数据的完整性、关联性和逻辑自洽性。

本发明的技术方案是这样实现的：

一种车辆的大量数据无缝更新方法，其特征在于包括如下步骤：

1）将数据系统的目标表改造为基于更新标识的分区表；基于更新标识字段将目标表改造为分区表，让每次更新的数据能够在同一个分区；

2）新建用于存储待更新数据的临时表；临时表与目标表结构相同；

3）数据系统判断是否发生异常，如果没有发生异常，则将待更新数据插入临时表；如果发生异常，则数据更新结束，或者返回前述第1）步，重新开始；

4）数据系统判断是否发生异常，如果没有发生异常，则用临时表与目标表进行交换分区，完成数据更新；如果发生异常，则删除临时表。

这样，本发明通过设立与目标表结构相同的临时表，用临时表与目标表进行交换分区，完成数据更新；能够保障数据更新过程中数据的完整性、关联性和逻辑自洽性；还能大幅度缩短数据更新的时间，显著提高系统的数据处理、数据交换的效率。