[发明专利]Excel数据自适应写入方法、装置、Java应用服务器及存储介质

说明书

本发明涉及人工智能技术领域，提供一种Excel数据自适应写入方法、装置、Java应用服务器及存储介质，所述Excel数据自适应写入方法包括：接收多个Excel数据写入请求；获取Java应用服务器的可用内存；根据可用内存分配内存块并在内存块中创建线程池；调用线程池中的多个线程从多个Excel数据中逐步加载多个目标Excel数据，并在停止加载后对多个线程进行锁保护；将加载的多个目标Excel数据写入预设数据库中；在多个目标Excel数据写入完成后释放锁保护及内存块中的数据占用的内存，并重新调用多个线程从多个Excel数据中逐步加载多个目标Excel数据。此外，本发明还涉及区块链技术，相关数据可存储于区块链节点中。本发明通过双重机制保障了写入Excel数据时不会导致内存溢出。

技术领域

本发明涉及人工智能技术领域，具体涉及一种Excel数据自适应写入方法、装置、Java应用服务器及存储介质。

背景技术

目前，将Excel数据写入数据库中，是通过apache的POI技术进行解析，但是POI技术在解析Excel数据时是通过将Excel内容全部读到内存中，再将内存中的数据写入数据库，导致内存消耗非常严重。如果同时读取数据的操作行为，很容易导致内存溢出。JAVA应用服务器一旦发生内存溢出，将会对JAVA应用服务器系统的运行性能造成重大影响，且内存溢出又难以诊断。

因此，有必要提供一种Excel数据自适应写入方法，以解决现有技术中将Excel数据写入数据库时易导致内存溢出的技术问题。

发明内容

鉴于以上内容，有必要提出一种Excel数据自适应写入方法、装置、Java应用服务器及存储介质，通过Java应用服务器的可用内存限定线程池的大小，及通过Java的反射机制确保请求加载的Excel数据不超过内存块的告警阈值，双重机制保障了写入Excel数据时不会导致内存溢出。

本发明的第一方面提供一种Excel数据自适应写入方法，应用于Java应用服务器中，所述Excel数据自适应写入方法包括：

接收多个Excel数据写入请求；

响应于所述多个Excel数据写入请求，获取所述Java应用服务器的可用内存；

根据所述可用内存分配内存块并在所述内存块中创建线程池；

调用所述线程池中的多个线程从所述多个Excel数据中逐步加载多个目标Excel数据，并在停止加载后对所述多个线程进行锁保护；

将加载的多个目标Excel数据写入预设数据库中；

在所述多个目标Excel数据写入完成后释放所述锁保护及所述内存块中的数据占用的内存，并重新调用所述线程池中的多个线程从所述多个Excel数据中逐步加载多个目标Excel数据。

根据本发明的一个可选实施例，在所述接收多个Excel数据写入请求之后，所述Excel数据自适应写入方法还包括：

逐条读取所述多个Excel数据；

将读取到的Excel数据依次写入Map类型数组中；

将所述Map类型数组中的数据依次添加至Excel数据队列中。

根据本发明的一个可选实施例，所述调用所述线程池中的多个线程从所述多个Excel数据中逐步加载多个目标Excel数据包括：

每隔预设时间发送一个数据加载请求至所述Excel数据队列，请求获取所述Excel数据队列中的一个Excel数据；

通过Java的反射机制获取请求加载的Excel数据的大小；

判断所有请求加载的Excel数据的大小是否超过所述内存块的告警阈值；