[发明专利]一种基于深度学习技术的行业数据信息抽取方法在审
| 申请号: | 201910666115.7 | 申请日: | 2019-07-23 | 
| 公开(公告)号: | CN110413725A | 公开(公告)日: | 2019-11-05 | 
| 发明(设计)人: | 肖清林 | 申请(专利权)人: | 福建奇点时空数字科技有限公司 | 
| 主分类号: | G06F16/31 | 分类号: | G06F16/31;G06F16/36;G06F16/958;G06F17/22 | 
| 代理公司: | 北京劲创知识产权代理事务所(普通合伙) 11589 | 代理人: | 陆滢炎 | 
| 地址: | 361000 福建省厦门市软件园*** | 国省代码: | 福建;35 | 
| 权利要求书: | 查看更多 | 说明书: | 查看更多 | 
| 摘要: | |||
| 搜索关键词: | 行业数据 数据信息 行业信息 关键信息 片段信息 信息抽取 词库 抽取数据 干扰信息 获取数据 分词 去除 学习 存储 网页 融合 | ||
1.一种基于深度学习技术的行业数据信息抽取方法,其特征在于,包括以下具体步骤:
S1、根据行业数据关键词A从网页上获取数据信息B;
S2、去除数据信息B中的干扰信息C,得到数据信息D;
S3、对数据信息D进行分词,得到关键信息E;
S4、将得到的关键信息E和行业数据关键词A融合,得到对应行业数据关键词A的行业信息F;
S5、对得到的行业信息F存储,并对得到的行业信息F建立基于深度学习的行业词库G;
S6、输入所要获取的行业数据片段信息H;
S7、从行业数据片段信息H中提取关键词I;
S8、根据关键词I从行业词库G中抽取数据信息J。
2.根据权利要求1所述的一种基于深度学习技术的行业数据信息抽取方法,其特征在于,S1中从网页上获取数据信息B的方式为:对网页Web的页面数据建立文档对象模型DOM树,以抽取网页Web的页面信息,得到数据信息B。
3.根据权利要求1所述的一种基于深度学习技术的行业数据信息抽取方法,其特征在于,干扰信息C包括重复信息、不正常显示信息和编码乱码信息。
4.根据权利要求1所述的一种基于深度学习技术的行业数据信息抽取方法,其特征在于,S7中对行业数据片段信息H中提取关键词I前,该方法还包括:对行业数据片段信息H进行预处理,用于去除行业数据片段信息H中的重复信息。
5.根据权利要求1所述的一种基于深度学习技术的行业数据信息抽取方法,其特征在于,还包括基于上述方法的工作系统,工作系统包括第一输入模块、第二输入模块、数据信息获取模块、数据信息处理模块、分词模块、中央处理系统、数据融合模块、检索抽取模块、提取模块、存储模块和行业词典模块;
第一输入模块与数据信息获取模块通讯连接,第一输入模块用于输入行业数据关键词A,且第一输入模块将行业数据关键词A发送给数据信息获取模块;
数据信息获取模块与信息数据处理模块通讯连接,数据信息获取模块用于根据行业数据关键词A从网页上获取数据信息B,并将数据信息B发送给信息数据处理模块;
信息数据处理模块与中央处理系统通讯连接,信息数据处理模块用于将数据信息B中的干扰信息C去除得到数据信息D,且信息数据处理模块用于将数据信息D发送给中央处理系统;
分词模块与中央处理系统通讯连接,分词模块用于对数据信息D进行分词,得到关键信息E;
数据融合模块与中央处理系统通讯连接,数据融合模块用于将关键信息E和行业数据关键词A融合,得到对应行业数据关键词A的行业信息F;
存储模块与中央处理系统通讯连接,存储模块用于存储行业信息F;
行业词典模块与中央处理系统通讯连接,且行业词典模块与存储模块通讯连接,行业词典模块用于根据存储模块中存储行业信息F建立基于深度学习的行业词库G;
第二输入模块与提取模块通讯连接,第二输入模块用于输入所要获取的行业数据片段信息H;
提取模块与中央处理系统通讯连接,提取模块用于行业数据片段信息H中提取关键词I;
检索抽取模块与中央处理系统通讯连接,且检索抽取模块与存储模块通讯连接,检索抽取模块用于从行业词库G中抽取对应行业数据片段信息H的数据信息J。
6.根据权利要求5所述的一种基于深度学习技术的行业数据信息抽取方法,其特征在于,工作系统还包括信息过滤模块;信息过滤模块与第二输入模块通讯连接,信息过滤模块与中央处理系统通讯连接,信息过滤模块用于去除行业数据片段信息H中的重复信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于福建奇点时空数字科技有限公司,未经福建奇点时空数字科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910666115.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种数据检索方法和装置
 - 下一篇:一种关系对库表建设方法
 





