[发明专利]舆情数据采集方法及装置

说明书

本发明公开了一种舆情数据采集方法及装置。其中，该方法包括：确定需要采集的舆情数据的类型和与类型对应的投放对象；向投放对象以众包的方式投放采集舆情数据的采集任务；收集投放对象根据采集任务反馈的采集对象；根据采集对象采集舆情数据。本发明解决了相关技术中数据采集的方式落后，效率低下的技术问题。

技术领域

本发明涉及数据采集领域，具体而言，涉及一种舆情数据采集方法及装置。

背景技术

舆情分析就是根据特定问题的需要，对针对这个问题的舆情进行深层次的思维加工和分析研究，得到相关结论的过程。在某个时间发生后，广大群众会通过各种途径了解到事情的真相，随后而来的便是纷纷如雨下的评论，或支持或反对、或理性或感性，或热情参与或冷眼旁观。当一种论调得到大家的认可后，舆情甚至可以对事件的走向发生重大的影响。而一旦有心人可以从这舆情中分析出一些结论，或者规律，得到一些启示，就可以做出一个符合该事件发展的正确的决定，或者通过舆情引导和干涉，改变事件的发展方向。舆情分析就是一个风向标。舆情分析往往包括舆情采集和舆情分析两大部分，舆情的采集是指对目标事件或目标问题的相关舆情进行采集，并进行数据化，从而方便进行数据分析。因此舆情数据采集的准确性，采集的数量级，采集的范围，采集的效率都会影响舆情分析的准确性。现有的舆情数据采集方式一般采集效率较低。

针对上述的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种舆情数据采集方法及装置，以至少解决相关技术中数据采集的方式落后，效率低下的技术问题。

根据本发明实施例的一个方面，提供了一种舆情数据采集方法，包括：确定需要采集的舆情数据的类型和与所述类型对应的投放对象；向所述投放对象以众包的方式投放采集所述舆情数据的采集任务；收集所述投放对象根据所述采集任务反馈的采集对象；根据所述采集对象采集所述舆情数据。

可选的，确定需要采集的舆情数据的类型包括：确定需要采集的舆情数据划分类型；确定所述舆情数据在所述划分类型中所属的类型为所述舆情数据的类型。

可选的，在向所述投放对象以众包的方式投放采集所述舆情数据的采集任务之前，还包括：生成所述采集任务，其中，所述采集任务中包括以下至少之一：采集所述舆情数据的平台，采集所述舆情数据的范围，采集所述舆情数据的发生时间。

可选的，收集所述投放对象根据所述采集任务反馈的采集对象包括：接收所述投放对象发送的以网页链接为载体的采集对象，其中，所述网页链接用于所述投放对象根据所述采集任务反馈所述采集对象；依据预定筛选条件对所述网页链接进行筛选，得到有效网页链接；收集所述有效网页链接。

可选的，依据预定筛选条件对收集的网页链接进行筛选，得到有效网页链接包括：在所述预定筛选条件包括：对单个投放对象的网页链接数量进行限定的数量限制条件，以及避免网页链接重复反馈的重复限制条件的情况下，确定网页链接数量满足所述数量限制条件，以及满足重复限制条件的不重复的网页链接为所述有效网页链接。

可选的，所述舆情数据包括以下至少之一：所述采集对象的标题、内容、发布人、发布时间、阅读量、评论数、点赞数和收藏数。

根据本发明实施例的另一个方面，提供了一种舆情数据采集装置，包括：确定模块，用于确定需要采集的舆情数据的类型和与所述类型对应的投放对象；发送模块，用于向所述投放对象以众包的方式投放采集所述舆情数据的采集任务；收集模块，用于收集所述投放对象根据所述采集任务反馈的采集对象；采集模块，用于根据所述采集对象采集所述舆情数据。

可选的，所述确定模块包括：第一确定单元，用于确定需要采集的舆情数据划分类型；第二确定单元，用于确定所述舆情数据在所述划分类型中所属的类型为所述舆情数据的类型。