[发明专利]信息采集方法、装置、电子设备和存储介质

说明书

本公开提供了一种信息采集方法、装置、电子设备、存储介质以及计算机程序产品，涉及人工智能技术领域，具体为大数据处理技术领域。具体实现方案为：在待采集第K级类目的网络地址信息不包含在已采集第K级类目文件中的情况下，基于所述待采集第K级类目的网络地址信息，获取所述待采集第K级类目的相关内容文本；基于所述待采集第K级类目的相关内容文本，确定待采集第M级类目所对应的网络地址信息；在所述待采集第M级类目所对应的网络地址信息不包含在已采集第M级类目文件中的情况下，基于所述待采集第M级类目所对应的网络地址信息获取所述待采集第M级类目包含的目标信息，将所述目标信息添加至目标文件。

技术领域

本公开涉及人工智能技术领域，尤其涉及大数据处理技术领域。

背景技术

随着互联网技术、人工智能以及大数据等技术的普及和发展，线上教育的需求越来越大，线上教育离不开优质的信息资源。然而在相关技术中，信息的采集处理效率较低，进而基于信息构建对应的目标文件或信息数据库的效率也较低。因此，如何提升信息采集的效率就成为需要解决的问题。

发明内容

本公开提供了一种信息采集方法、装置、电子设备、存储介质以及计算机程序产品。

根据本公开的一方面，提供了一种信息采集方法，包括：

在待采集第K级类目的网络地址信息不包含在已采集第K级类目文件中的情况下，基于所述待采集第K级类目的网络地址信息，获取所述待采集第K级类目的相关内容文本；K为大于等于1的整数；

基于所述待采集第K级类目的相关内容文本，确定待采集第M级类目所对应的网络地址信息；M为大于K的整数；

在所述待采集第M级类目所对应的网络地址信息不包含在已采集第M级类目文件中的情况下，基于所述待采集第M级类目所对应的网络地址信息获取所述待采集第M级类目包含的目标信息，将所述目标信息添加至目标文件。

根据本公开的另一方面，提供了一种信息采集装置，包括：

第一获取模块，用于在待采集第K级类目的网络地址信息不包含在已采集第K级类目文件中的情况下，基于所述待采集第K级类目的网络地址信息，获取所述待采集第K级类目的相关内容文本；K为大于等于1的整数；

第二获取模块，用于基于所述待采集第K级类目的相关内容文本，确定待采集第M级类目所对应的网络地址信息；M为大于K的整数；

信息采集模块，用于在所述待采集第M级类目所对应的网络地址信息不包含在已采集第M级类目文件中的情况下，基于所述待采集第M级类目所对应的网络地址信息获取所述待采集第M级类目包含的目标信息，将所述目标信息添加至目标文件。

根据本公开的另一方面，提供了一种电子设备，包括：

至少一个处理器；以及

与至少一个处理器通信连接的存储器；其中，

存储器存储有可被至少一个处理器执行的指令，指令被至少一个处理器执行，以使至少一个处理器能够执行本公开任一实施例提供的方法。

根据本公开的另一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其特征在于，计算机指令用于使计算机执行本公开任一实施例提供的方法。

根据本公开的另一方面，提供了一种计算机程序产品，包括计算机程序，该计算机程序在被处理器执行时实现本公开任一实施例提供的方法。

根据本公开的技术方案，可以避免重复采集信息的问题，提升了信息采集的效率。

应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。

附图说明