[发明专利]基于链接数据爬取的产品信息分析方法和终端设备

说明书

本发明公开一种基于链接数据爬取的产品信息分析方法，用于终端设备，所述方法包括以下步骤：利用预设访问软件，构建请求头，并利用预设产品信息统计目标和目标平台地址，构建接口链接；利用所述请求头，访问所述接口链接对应的所述目标平台地址中产品的产品信息统计页面；从所述产品信息统计页面中，获取所述产品的产品信息；利用所述产品信息，进行所述产品的关联度分析，获得产品分析结果。本发明还公开一种基于链接数据爬取的产品信息分析装置、终端设备以及计算机可读存储介质。利用本发明的方法，不需要技术人员手动操作，大大降低了产品信息的获取时长，提高了产品分析效率。

技术领域

本发明涉及数据分析技术领域，特别涉及一种基于链接数据爬取的产品信息分析方法、装置、终端设备以及计算机可读存储介质。

背景技术

随着电商平台的增多，运营人员接触的各种产品也随之逐步增加。在平台上想要增加自己运营产品的优势，必须要对整个平台以及平台的产品数据进行分析，不能盲目的去上架新产品。

但是，目前需要技术人员手动去各个平台进行产品信息的获取，导致产品信息的获取效率较低。

发明内容

本发明的主要目的是提供一种基于链接数据爬取的产品信息分析方法、装置、终端设备以及计算机可读存储介质，旨在解决现有技术中需要技术人员手动去各个平台进行产品数据的获取，导致产品数据的获取效率较低的技术问题。

为实现上述目的，本发明提出一种基于链接数据爬取的产品信息分析方法，用于终端设备，所述方法包括以下步骤：

利用预设访问软件，构建请求头，并利用预设产品信息统计目标和目标平台地址，构建接口链接；

利用所述请求头，访问所述接口链接对应的所述目标平台地址中产品的产品信息统计页面；

从所述产品信息统计页面中，获取所述产品的产品信息；

利用所述产品信息，进行所述产品的关联度分析，获得产品分析结果。

可选的，所述利用所述请求头，访问所述接口链接对应的所述目标平台地址中产品的产品信息统计页面的步骤之前，所述方法还包括：

构建代理池中间件；

利用代理池中间件，获取所述终端设备使用的设备网络地址；

所述利用所述请求头，访问所述接口链接对应的所述目标平台地址中产品的产品信息统计页面的步骤，包括：

利用所述设备网络地址和所述请求头，访问所述接口链接对应的所述目标平台地址中产品的产品信息统计页面。

可选的，所述从所述产品信息统计页面中，获取所述产品的产品信息的步骤，包括：

利用分布式程序，从所述产品信息统计页面中，获取所述产品的产品信息。

可选的，所述从所述产品信息统计页面中，获取所述产品的产品信息的步骤之前，所述方法还包括：

利用预设产品信息统计目标，确定筛选条件；

利用所述筛选条件在所述热卖信息统计页面中筛选出选定产品对应的选定产品信息；

所述从所述产品信息统计页面中，获取所述产品的产品信息的步骤，包括：

获取所述选定产品信息；

所述利用所述产品信息，进行所述产品的关联度分析，获得产品分析结果的步骤包括：

利用所述选定产品信息，进行所述选定产品的关联度分析，获得产品分析结果。

可选的，所述利用所述设备网络地址和所述请求头，访问所述接口链接对应的所述目标平台地址中产品的产品信息统计页面的步骤之前，所述方法还包括：