[发明专利]一种面向微博文本流的突发关键词检测方法

说明书

技术领域

本发明涉及互联网信息管理领域，尤其涉及一种面向微博文本流的突发关键词检测方法。 

背景技术

随着2006年Twitter正式上线以及Web2.0技术的快速发展，以互联网为载体的各种社交网络平台成为Web2.0时代最具代表性的应用，其中微博客(以下简称微博)作为其中主要的平台得到了广大网民的关注。国内包括新浪、腾讯、搜狐和网易等主要网络媒体平台自2009年开始分别推出各自的微博服务，微博正式进入中文上网主流人群视野。 

目前微博以及成为网民获取信息的重要途径之一，微博从满足人们弱关系的社交需求上逐渐演变成为大众化的舆论平台，越来越多机构及公众人物都通过微博来发布或传播信息。由于微博的即时性、自主性以及互动性，使得许多非常规突发事件发生后，微博作为人们信息发布的主要载体为突发事件提供了第一传播平台，包括“2013年吉林省松原地震”以及“青岛石油管线爆炸”等突发事件，微博都是最早的信息来源。 

微博中对于社会突发事件的报道和讨论对于危机应对和态势感知是有积极意义的，但是由于用户参与微博的技术门槛较低，用户自身素质良莠不齐，特别是微博用户中存在一些僵尸粉丝为了自身利益以人为外力作用的方式协同推动对消费者有蛊惑的虚假突发话题，这类话题一旦通过微博在短时间内不断被转发扩散，将会助长虚假突发话题的传播并产生极为不良的影响。微博已经成为互联网舆情形成的主要网络媒体之一，其中对突发话题的检测是网络舆情管理的重要目标之一，因此，突发关键词检测作为突发话题检测最重要的一个步骤显得尤为重要。 

现有的微博突发关键词发现方法中未考虑僵尸粉丝在突发话题形成过程中的推动作用以及人类生活作息对突发关键词检测方法的准确度的影响，应用到实际微博舆情监管中可能将僵尸粉丝推动以及受人类生活作息影响较大的关键词误判为突发关键词从而导致较大的误报率、较低的检测率。 

发明内容

本发明的目的是提供一种提高突发关键词检测率和准确度的面向微博文本流的突发关键词检测方法。 

本发明的目的是这样实现的： 

(1)实时采集微博数据，针对实时微博数据流建立基于动态滑动窗口机制的消息会话模型； 

(2)从消息会话模型中抽取用户信任属性，根据设定的信任窗口大小构建动态信任模型，计算用户的信任度； 

(3)根据设定的消息窗口大小对实时微博消息流进行切分，融合用户信任度计算每个时间窗口中关键词的权重，形成突发关键词的权重序列； 

(4)针对突发关键词的权重序列，采用基于动力学模型的突发关键词发现算法计算关键词的突发权值，如果关键词的突发权值大于系统设定的突发阈值则该词为突发关键词。 

动态滑动窗口机制为动态滑动信任窗口和动态滑动消息窗口。 

消息会话模型中包括： 

微博消息、微博用户以及关键词的关联操作； 

针对实时消息流消息会话模型的更新以及删除操作。 

在抽取用户信任属性之前还包括： 

根据用户交互行为定义用户交互动作以及用户交互指数； 

根据信任窗口内的用户交互动作建立用户交互图。 

用户信任属性包括： 

用户交互度以及用户交互质量。 

在计算关键词的权重之前还包括： 

对微博消息内容进行预处理，包括中文分词、标签的识别与提取、去停用词、提取名词和动词作为关键词。 

在生成关键词的权重序列之前还包括： 

根据用户作息时间以及关键词的历史权重值消除用户作息时间对突发关键词检测的影响。 

基于动力学模型的突发关键词发现算法包括： 

定义与形式化基于动力学的趋势分析指标对关键词权重序列进行处理。 

本发明的有益效果在于： 

1、本发明提出一个基于用户交互行为的信任模型，利用两个信任属性评估用户的信任度，融合此信任模型的突发关键词发现方法能够避免发现由僵尸粉丝推动的伪突发关键词。 

2、本发明提出一个基于动力学模型的突发关键词发生方法，此方法能够降低人类作息时间的影响，提高检测突发关键词的准确度。 

附图说明

图1是本发明提供的微博突发关键词检测的方法的流程图。 

具体实施方式