[发明专利]基于语义信息的主题识别方法与主题演化路径构建方法在审
申请号: | 202111617536.4 | 申请日: | 2021-12-27 |
公开(公告)号: | CN114358015A | 公开(公告)日: | 2022-04-15 |
发明(设计)人: | 胡广伟;滕婕 | 申请(专利权)人: | 南京大学 |
主分类号: | G06F40/30 | 分类号: | G06F40/30;G06F40/289;G06F40/242;G06F40/216;G06F16/215;G06F16/35 |
代理公司: | 北京智绘未来专利代理事务所(普通合伙) 11689 | 代理人: | 肖继军;魏辛欣 |
地址: | 210023 江苏*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 语义 信息 主题 识别 方法 演化 路径 构建 | ||
1.基于语义信息的主题识别方法,其特征在于,所述基于语义信息的主题识别方法包括以下步骤:
步骤1,采集包含公众诉求的文本数据并对文本数据进行分词;
步骤2,统计步骤1分词结果中的核心词汇数量,得到核心词汇折线序列,L={l1,l2,...lm},lt表示时间点t的核心词汇数量,1≤t≤m,m为单位时间的总个数;
步骤3,将核心词汇折线序列L={l1,l2,...lm}绘制成一条核心词汇数量序列折线,并按时间进行区间划分得到时间线段集合L′;
步骤4,利用分段线性表示法对时间线段集合L′进行拟合,得到趋势线C′;
步骤5,确定最优的时间段划分数量opt_hum;
步骤6,构建opt_hum个社会诉求语义信息网络,并将其会合成动态语义关系网络H;
步骤7,识别动态语义关系网络H的社会诉求社区以及主题词。
2.根据权利要求1所述的基于语义信息的主题识别方法,其特征在于:
在所述步骤1中,所述文本数据包括公众寄送的邮件、书信、短信文本;
使用条件随机场CRF对来信标题、来信内容、来信内容、回复单位进行分词得到词汇以及每个词汇的词性,经过滤筛选,保留人名、地名、形容名词的形容词、专有名词以及动词。
3.根据权利要求1所述的基于语义信息的主题识别方法,其特征在于:
所述步骤2包括以下内容:
步骤2.2,移除以非汉字字符开头的无意义的(词汇,词性)对,此处包括由数字开头或者全部为数字的词汇所在的(词汇,词性)对;
步骤2.3,移除只出现一次的(词汇,词性)对,保留其他全部;
步骤2.4,对(词汇,词性)对中包含噪声词汇的(词汇,词性)对进行清洗;
噪声词汇包括机构名称、组织机构名称、头衔、一般书信格式用语、尊称;
步骤2.5,根据文档中语句语义表达,对包含表达含义一致词汇的(词汇,词性)对进行合并处理;
步骤2.6,对步骤2.5处理后的(词汇,词性)对进行词汇修整并得到核心词汇;
步骤2.7,统计每个设定时刻核心词汇出现的频率,按照出现时间绘制核心词汇折线序列,L={l1,l2,…lm}。
4.根据权利要求1所述的基于语义信息的主题识别方法,其特征在于:
在所述步骤3中,所述时间线段集合L′为:
L′={L′1,L′2,…,L′s,…,L′m-1}
其中,L′1表示起始时间为t1,结束时间为t2的时间线段,L′2表示起始时间为t2,结束时间为t3的时间线段,基于此种划分规律,直到划分到第m-1个时间线段为止。
5.根据权利要求1所述的基于语义信息的主题识别方法,其特征在于:
在所述步骤4中,趋势线C′满足以下关系式:
其中,表示C′的第i个趋势线段,1≤i≤m-1,线段的开始时间为ti,结束时间为ti+1,每条线段间根据分段线性表示法可以划分为多个时间点ti+1,ti+2…;r表示线段的总个数;表示在第ti时刻的核心词数量,Ci表示所有核心词数量的总和。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京大学,未经南京大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111617536.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种儿童右心的心室辅助装置
- 下一篇:一种应用于毕业生就业指导的装置及系统
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置