[发明专利]模型的在线训练方法、服务器及存储介质在审
申请号: | 201810386021.X | 申请日: | 2018-04-26 |
公开(公告)号: | CN108763313A | 公开(公告)日: | 2018-11-06 |
发明(设计)人: | 吴壮伟 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 深圳市沃德知识产权代理事务所(普通合伙) 44347 | 代理人: | 于志光;郭梦霞 |
地址: | 518000 广东省深*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种模型的在线训练方法、服务器及存储介质,该方法根据用户发送的种子网页,利用爬虫工具爬取该种子网页内的所有网页链接,并利用筛选器筛选出符合要求的网页链接。接着,从筛选后的网页链接所指向的网页中获取网页源码,进行预处理,得到可用词集。然后,利用ETL处理方式将可用词集按照预设格式存储到数据库中,并调用模型对训练数据进行在线训练。最后,调整模型参数,验证模型准确性,生成完整的模型,并将生成的模型存储到模型服务器的指定目录。利用本发明,可以在线进行模型训练。 | ||
搜索关键词: | 网页链接 在线训练 存储介质 种子网页 可用 服务器 预处理 筛选 模型服务器 模型准确性 模型参数 模型存储 模型训练 爬虫工具 网页源码 训练数据 用户发送 预设格式 筛选器 调用 指向 数据库 存储 网页 验证 | ||
【主权项】:
1.一种模型的在线训练方法,应用于服务器,其特征在于,所述方法包括:爬取步骤:接收用户发送的种子网页,利用爬虫工具爬取该种子网页内的所有网页链接;筛选步骤:利用预设的筛选器筛选出符合要求的网页链接;预处理步骤:从筛选后的网页链接所指向的网页中获取网页源码,对网页源码进行预处理,得到网页的可用词集;调用步骤:利用ETL处理方式将得到的可用词集按照预设格式存储到数据库中,作为训练数据,并调用模型对训练数据进行在线训练;生成步骤:调整模型参数,验证模型准确性,生成完整的模型;存储步骤:将生成的模型存储到模型服务器的指定目录。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810386021.X/,转载请声明来源钻瓜专利网。