[发明专利]一种词向量文件加载方法、装置、存储介质及电子设备

权利要求书

1.一种词向量文件加载方法，应用于电子设备，其特征在于，所述方法包括：

依据词频和业务领域对词向量文件进行分割，以获得多个子文件，其中，至少一个所述子文件为启动加载文件，所述启动加载文件包括所述业务领域内的核心词汇和词频大于第一阈值的词汇；

加载所述启动加载文件，构建词向量查询模型；

加载所述启动加载文件，构建词向量查询模型的步骤，包括：

将所述启动加载文件分为多个子片区；

通过N个线程并行加载所述多个子片区，其中，N为所述电子设备的CPU核数；

构建所述词向量查询模型；

所述多个子文件还包括延时加载文件，所述延时加载文件包括词频大于第二阈值且小于第一阈值的常见词汇；

在加载所述启动加载文件之后，所述方法还包括：

加载所述延时加载文件，并更新所述词向量查询模型；

所述多个子文件还包括专用词汇文件和生僻词汇文件，所述专用词汇文件包含所述业务领域内的专用词汇，所述生僻词汇文件包含词频小于第二阈值的生僻词汇；

在加载所述延时加载文件，并更新所述词向量查询模型之后，所述方法还包括：

当查询的词汇不属于所述词向量查询模型时，加载所述专用词汇文件和所述生僻词汇文件，并更新所述词向量查询模型。

2.如权利要求1所述的词向量文件加载方法，其特征在于，在依据词频和业务领域对词向量文件进行分割之前，所述方法还包括：

将词汇按照词频高低排列，以得到所述词向量文件。

3.一种词向量文件加载装置，应用于电子设备，其特征在于，所述装置包括：

词向量管理单元，用于依据词频和业务领域对词向量文件进行分割，以获得多个子文件，其中，至少一个所述子文件为启动加载文件，所述启动加载文件包括所述业务领域内的核心词汇和词频大于第一阈值的词汇；

模型管理单元，用于加载所述启动加载文件，构建词向量查询模型；

所述模型管理单元具体地用于将所述启动加载文件分为多个子片区；通过N个线程并行加载所述多个子片区，其中，N为所述电子设备的CPU核数；构建所述词向量查询模型；

所述多个子文件还包括延时加载文件，所述延时加载文件包括词频大于第二阈值且小于第一阈值的常见词汇；

所述模型管理单元还用于加载所述延时加载文件，并更新所述词向量查询模型；

所述多个子文件还包括专用词汇文件和生僻词汇文件，所述专用词汇文件包含所述业务领域内的专用词汇，所述生僻词汇文件包含词频小于第二阈值的生僻词汇；

在加载所述延时加载文件，并更新所述词向量查询模型之后，所述词向量文件加载装置还用于当查询的词汇不属于所述词向量查询模型时，加载所述专用词汇文件和所述生僻词汇文件，并更新所述词向量查询模型。

4.一种存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现如权利要求1或2所述的方法。

5.一种电子设备，其特征在于，包括：处理器和存储器，所述存储器用于存储一个或多个程序；当所述一个或多个程序被所述处理器执行时，实现如权利要求1或2所述的方法。