[发明专利]时态数据集上的实体识别方法有效
| 申请号: | 201811200645.4 | 申请日: | 2018-10-16 |
| 公开(公告)号: | CN109543712B | 公开(公告)日: | 2023-04-07 |
| 发明(设计)人: | 王宏志;丁小欧;李建中;高宏 | 申请(专利权)人: | 哈尔滨工业大学 |
| 主分类号: | G06F18/231 | 分类号: | G06F18/231 |
| 代理公司: | 北京格允知识产权代理有限公司 11609 | 代理人: | 周娇娇;李亚东 |
| 地址: | 150001 黑龙*** | 国省代码: | 黑龙江;23 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 时态 数据 实体 识别 方法 | ||
1.一种时态数据集上的实体识别方法,其特征在于,包括以下步骤:
S1:基于规则对数据进行预处理,根据否定匹配依赖规则将初始数据集合S分成多个小集合,利用时序约束规则对不可能指向同一实体的记录对之间标记符号“-”,每个小集合中未被标记符号“-”的记录之间使用符号“·”进行连接并计算每个小集合中被标记符号“·”的记录之间的相似度sim(t1,t2);
S2:框架聚类,当两条记录t1,t2之间有符号“·”连接且它们的相似度sim(t1,t2)大于阈值θh时,使用符号“+”连接这两条记录,在存在“+”关系的记录对上计算传递闭包以得到初始数据集S的框架聚类结果Q;
S3:类融合,定义所述框架聚类结果Q中只包含一条记录的类为单体类,包含多条记录的类为实体类,将所述单体类选择性地融合到所述实体类中转化为候选类,所述实体类直接转化为候选类,进一步对所述候选类进行融合;
步骤S1中,按照下述步骤计算两条记录t1,t2之间的相似度sim(t1,t2):
①根据所述时序约束规则确定记录t1,t2在属性上的时序;
②对于每个属性,按照以下公式计算不确定性U(Ai):
其中,<Ai表示在属性Ai上的时效性关系运算符;
③对于每个属性,按照以下公式计算其权重W(Ai):
④按照以下公式计算两条记录t1,t2之间的相似度sim(t1,t2):
2.根据权利要求1所述的一种时态数据集上的实体识别方法,其特征在于,所述步骤S1中,利用式(1)中的否定匹配依赖规则划分初始数据集S:
此规则表明当任意两条记录t1与t2,在属性Aj上不相同时,它们一定指向不同实体。
3.根据权利要求1所述的一种时态数据集上的实体识别方法,其特征在于,步骤S1中的所述初始数据集合S为职员信息管理数据,所述时序约束规则为式(2)、(3)、(4)
其中,salary表示职员的报酬,status表示职员的婚姻状态,address表示职员的家庭住址,对于同一职员在数据集合中的两条记录t1和t2,规则ψ1表示如果t1在报酬属性上的值低于t2,则判定t2在报酬属性上时效性高于t1;规则ψ2表示如果记录t1在婚姻状态属性上的值为单身,记录t2的值为已婚,则判定t2在婚姻状态属性上时效性高于t1;规则ψ3表明,如果t2在婚姻状态属性上时效性高于t1,则判定t2在家庭住址属性上时效性高于t1。
4.根据权利要求1所述的一种时态数据集上的实体识别方法,其特征在于,所述步骤S3中,所述将所述单体类选择性地融合到所述实体类中转化为候选类包括:计算所述单体类与所有实体类的相似度,如果所述单体类与某个实体类的相似度大于已设定的阈值θu,那么将所述单体类融合到所述某个实体类中;如果小于已设定的阈值θu,那么将所述单体类转化为一个新的候选类。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于哈尔滨工业大学,未经哈尔滨工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811200645.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于ID3算法的决策树生成方法
- 下一篇:训练集的修正方法及装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





