[发明专利]基于多源异构数据的垂直领域知识图谱构建方法及系统在审
| 申请号: | 202111648118.1 | 申请日: | 2021-12-29 |
| 公开(公告)号: | CN114254128A | 公开(公告)日: | 2022-03-29 |
| 发明(设计)人: | 李岱峰;李栩婷;林凯欣;古风云;李鑫;廖健斌;江涛 | 申请(专利权)人: | 中山大学 |
| 主分类号: | G06F16/36 | 分类号: | G06F16/36;G06F40/279;G06F40/30 |
| 代理公司: | 广州粤高专利商标代理有限公司 44102 | 代理人: | 禹小明 |
| 地址: | 510275 广东*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 基于 多源异构 数据 垂直 领域 知识 图谱 构建 方法 系统 | ||
1.一种基于多源异构数据的垂直领域知识图谱构建方法,其特征在于,包括以下步骤:
S1:获取构建垂直领域知识图谱需要的数据并进行预处理;
S2:构建知识抽取任务模型,所述知识抽取任务模型实现多种抽取任务;
S3:利用强化学习对所述知识抽取任务模型进行训练,得到训练好的知识抽取任务模型;
S4:利用训练好的知识抽取任务模型对步骤S1获取的数据进行知识抽取,得到三元组;
S5:将所述三元组导入知识图谱中,得到最终的知识图谱。
2.根据权利要求1所述的基于多源异构数据的垂直领域知识图谱构建方法,其特征在于,步骤S1中获取构建垂直领域知识图谱需要的数据并进行预处理,具体为:
所述获取构建垂直领域知识图谱需要的数据包括从企业内部获取的产品详细资料和内部数据库数据,从新闻网站获取的领域相关新闻文本,从社交平台和电子商务网站获取的用户评论文本;
所述预处理包括对获取的文本数据进行清洗,对清洗后的文本数据分词和句法依存分析,所述清洗包括去除特殊符号和进行分句,去除不涉及关键实体、关系、事件、观点表达的句子;所述对清洗后的文本数据分词和句法依存分析包括使用Stanford Core工具,将中文文本进行分词,然后进行句法依存分析得到句子的句法依赖树,采用tokenizations包中的get_alignments()方法,将BERT对句子划分的结果与按空格划分的结果对齐,同时基于Stanford Core工具的句法依存分析结果也与按空格划分的结果对齐,实现最终文本的对齐。
3.根据权利要求1所述的基于多源异构数据的垂直领域知识图谱构建方法,其特征在于,步骤S2中所述知识抽取任务模型包括高层模块和低层模块,所述高层模块从句子的开头进行扫描,当在某个位置检测到低层任务触发时,触发一个低层模块实现抽取任务,抽取任务完成后,高层模块从该位置继续扫描并重复上述过程直至句子结束。
4.根据权利要求3所述的基于多源异构数据的垂直领域知识图谱构建方法,其特征在于,所述低层任务触发包括:
当检测到关系时,触发一个低层模块实现实体关系抽取任务,识别关系的源实体和目标实体;
当检测到事件触发词时,触发一个低层模块来实现事件抽取任务,识别事件的相关论元,包括时间、地点和人物;
当检测到观点表达对象时,触发一个低层模块来实现观点抽取任务,识别该对象的观点词。
5.根据权利要求4所述的基于多源异构数据的垂直领域知识图谱构建方法,其特征在于,步骤S3中利用强化学习对所述知识抽取任务模型进行训练,具体为:
利用基于动作的强化学习策略分别对所述高层模块和低层模块进行训练。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中山大学,未经中山大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111648118.1/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





