[发明专利]数据导入方法、装置、计算机设备及可读存储介质

说明书

本发明提供了一种数据导入方法、装置、计算机设备及可读存储介质，其中方法包括：对待导入的多条数据进行分组，获得多组数据；将所述多组数据存入缓存；通过多个线程对缓存中的多组数据进行处理；将所述处理结果存入数据库。本发明提供的数据导入方法、装置、计算机设备及可读存储介质，通过对待导入的多条数据进行分组，获得多组数据，将所述多组数据存入缓存，并采用多个线程对缓存中的多组数据进行处理，再将所述处理结果存入数据库，能够有效提高数据导入效率，无需用户长时间等待，提高了用户体验度。

技术领域

本发明属于计算机技术领域，更具体地说，是涉及一种数据导入方法、装置、计算机设备及可读存储介质。

背景技术

随着计算机科技的不断发展，信息系统的应用也越来越广泛。在常规的信息系统中，存在着各种各样的数据导入功能，由用户上传需要导入的数据，服务器对数据进行处理后存入数据库，从而实现数据的导入。

现有技术的不足之处在于，在数据量较大的情况下，导入数据往往变得非常缓慢，常常需要等待十几甚至几十分钟才能完成，数据导入效率较低，用户体验较差。

发明内容

有鉴于此，本发明实施例提供一种数据导入方法、装置、计算机设备及可读存储介质，可以解决现有技术中数据导入效率较低的技术问题。

一方面，本发明实施例提供一种数据导入方法，包括：

对待导入的多条数据进行分组，获得多组数据；

将所述多组数据存入缓存；

通过多个线程对缓存中的多组数据进行处理，获得处理结果；

将所述处理结果存入数据库。

可选的，通过多个线程对缓存中的多组数据进行处理，包括：

获取缓存中的每组数据的标识信息；

将缓存中多组数据的标识信息分别传入多个线程，其中，所述多组数据的标识信息与所述多个线程一一对应；

通过每组数据的标识信息对应的线程对该组数据进行处理。

可选的，通过每组数据的标识信息对应的线程对该组数据进行处理，包括：

通过对应的线程对每组线程中的每条数据执行如下操作：对所述数据进行校验；校验成功后，对所述数据进行处理。

可选的，在将所述处理结果存入数据库之后，还包括：

获取校验失败和/或处理失败的数据；

将校验失败和/或处理失败的数据反馈给用户。

可选的，对待导入的多条数据进行分组，获得多组数据，包括：

获取用户上传的表格，所述表格中存储有待导入的数据；

对所述表格进行解析，将所述待导入的数据转换为列表数据；

对所述列表数据进行分组，获得多组数据。

可选的，将校验失败和/或处理失败的数据反馈给用户，包括：

在用户导入的表格中增加一列，在增加的列中，查找校验失败和/或处理失败的数据对应的单元格；

在所述校验失败和/或处理失败的数据对应的单元格中添加所述数据导入失败的原因；

将添加有失败原因的表格推送给用户。

可选的，对待导入的多条数据进行分组，获得多组数据，包括：

若待导入的数据的条数小于第一预设阈值，则按K条一组对待导入的数据进行分组；