[发明专利]模型训练方法、短信审核方法、装置、设备以及存储介质在审
申请号: | 202011093027.1 | 申请日: | 2020-10-13 |
公开(公告)号: | CN112085219A | 公开(公告)日: | 2020-12-15 |
发明(设计)人: | 何烩烩;王乐义;刘明浩;郭江亮 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06N20/00 | 分类号: | G06N20/00;G06K9/62 |
代理公司: | 北京市铸成律师事务所 11313 | 代理人: | 邓海鸿;杨瑾瑾 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 模型 训练 方法 短信 审核 装置 设备 以及 存储 介质 | ||
1.一种模型训练方法,包括:
对第一未标注样本进行样本约减,得到第二未标注样本;
将所述第二未标注样本输入机器学习模型进行预测,得到对所述第二未标注样本的预测结果对应的概率;
根据所述概率从所述第二未标注样本中选择出第三未标注样本;
利用标注后的所述第三未标注样本训练所述机器学习模型。
2.根据权利要求1所述的方法,其中,对第一未标注样本进行样本约减,得到第二未标注样本,包括:
计算样本之间的相似度;所述样本之间的相似度包括每两个所述第一未标注样本之间的相似度,和/或,每个所述第一未标注样本和历史样本之间的相似度;
根据所述样本之间的相似度进行样本约减。
3.根据权利要求1或2所述的方法,其中,根据所述概率从所述第二未标注样本中选择出第三未标注样本,包括:
利用预先设置的选择策略进行计算,得到第三未标注样本;所述选择策略包括最大熵策略、最小置信度策略、最小间隔策略和分类器投票策略中的至少一种。
4.根据权利要求1或2所述的方法,其中,根据所述概率从所述第二未标注样本中选择出第三未标注样本,还包括:
根据所述概率从所述第二未标注样本中选择出候选样本;
对所述候选样本进行样本约减,得到第三未标注样本。
5.根据权利要求1或2所述的方法,其中,所述第三未标注样本的标注方式包括:离线标注和/或在线标注。
6.根据权利要求1或2所述的方法,所述方法还包括:
采用交叉熵损失函数和焦点损失函数训练所述机器学习模型。
7.一种短信审核模型的训练方法,包括:
采用权利要求1-6任一项所述的模型训练方法得到短信审核模型。
8.一种短信审核方法,包括:
获取待审核短信的文本信息;
利用关键词对所述待审核短信的文本信息进行初步审核;
将通过所述初步审核的待审核短信的文本信息,输入到短信审核模型进行预测,得到所述待审核短信的文本信息的审核结果,所述短信审核模型为采用权利要求7所述的短信审核模型的训练方法得到的模型。
9.一种模型训练装置,包括:
约减单元,用于对第一未标注样本进行样本约减,得到第二未标注样本;
预测单元,用于将所述第二未标注样本输入机器学习模型进行预测,得到对所述第二未标注样本的预测结果对应的概率;
选择单元,用于根据所述概率从所述第二未标注样本中选择出第三未标注样本;
训练单元,用于利用标注后的所述第三未标注样本训练所述机器学习模型。
10.根据权利要求9所述的装置,其中,所述约减单元用于:
计算样本之间的相似度;所述样本之间的相似度包括每两个所述第一未标注样本之间的相似度,和/或,每个所述第一未标注样本和历史样本之间的相似度;
根据所述样本之间的相似度进行样本约减。
11.根据权利要求9或10所述的装置,其中,所述选择单元用于:
利用预先设置的选择策略进行计算,得到第三未标注样本;所述选择策略包括最大熵策略、最小置信度策略、最小间隔策略和分类器投票策略中的至少一种。
12.根据权利要求9或10所述的装置,其中,所述选择单元还用于:
根据所述概率从所述第二未标注样本中选择出候选样本;
对所述候选样本进行样本约减,得到第三未标注样本。
13.根据权利要求9或10所述的装置,其中,所述第三未标注样本的标注方式包括:离线标注和/或在线标注。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011093027.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:复合型银系二氧化钛无机抗菌剂
- 下一篇:显示设备及计算设备