[发明专利]语义理解框架结构的搜索方法和装置有效
申请号: | 202010592650.5 | 申请日: | 2020-06-25 |
公开(公告)号: | CN111539225B | 公开(公告)日: | 2023-07-21 |
发明(设计)人: | 希滕;张刚;温圣召 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F40/30 | 分类号: | G06F40/30;G06F40/20 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 单冠飞 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语义 理解 框架结构 搜索 方法 装置 | ||
本申请公开了一种语义理解框架结构的搜索方法和装置,涉及人工智能、深度学习、云计算、自然语言处理、智能搜索等领域。具体实现方案为:利用编码生成器在搜索空间中采样语义理解框架结构;其中,搜索空间包括至少两个语义理解框架结构;对采样得到的语义理解框架结构进行训练,得到语义理解框架结构的性能信息;根据性能信息更新编码生成器,返回利用编码生成器在搜索空间中采样语义理解框架结构的步骤,直至采样语义理解框架结构的次数达到预设阈值N;其中,N为大于或等于2的整数;将第N次采样得到的语义理解框架结构确定为目标结构。实施本申请实施例,可以自动搜索性能最优的语义理解框架结构。
技术领域
本申请涉及数据处理领域,尤其涉及人工智能、深度学习、云计算、自然语言处理、智能搜索等领域。
背景技术
语义理解框架是一种较为通用的语义理解模型。语义理解框架在预训练阶段中利用大量的语料和语义任务,获得多个维度的自然语言信息。当用于具体的语义理解任务时,语义理解框架会被加上不同的输出层,以解决实际任务。语义理解框架一般部署在服务器上,使用较大型的模型结构承载海量的语义知识,提高语义表示能力。
发明内容
本申请提供了一种语义理解框架结构的搜索方法、装置、电子设备和存储介质。
根据本申请的一方面,提供了一种语义理解框架结构的搜索方法,包括:
利用编码生成器在搜索空间中采样语义理解框架结构;其中,搜索空间包括至少两个语义理解框架结构;
对采样得到的语义理解框架结构进行训练,得到语义理解框架结构的性能信息;
根据性能信息更新编码生成器,返回利用编码生成器在搜索空间中采样语义理解框架结构的步骤,直至采样语义理解框架结构的次数达到预设阈值N;其中,N为大于或等于2的整数;
将第N次采样得到的语义理解框架结构确定为目标结构。
根据本申请的另一方面,提供了一种语义理解框架结构的搜索装置,包括:
采样模块,用于利用编码生成器在搜索空间中采样语义理解框架结构;其中,搜索空间包括至少两个语义理解框架结构;
训练模块,用于对采样得到的语义理解框架结构进行训练,得到语义理解框架结构的性能信息;
更新模块,用于根据性能信息更新编码生成器,返回利用编码生成器在搜索空间中采样语义理解框架结构的步骤,直至采样语义理解框架结构的次数达到预设阈值N;其中,N为大于或等于2的整数;
确定模块,用于将第N次采样得到的语义理解框架结构确定为目标结构。
根据本申请的另一方面,提供了一种电子设备,包括:
至少一个处理器;以及
与至少一个处理器通信连接的存储器;其中,
存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够执行本申请任一实施例提供的方法。
根据本申请的另一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,计算机指令用于使计算机执行本申请任一实施例提供的方法。
根据本申请的技术方案,利用编码生成器在搜索空间中采样得到的语义理解框架结构的性能信息,更新编码生成器,使得编码生成器每一次采样的结果都是对上一次采样的结果的优化,从而自动搜索出性能最优的语义理解框架结构。实施本申请的技术方案,可以优化语义理解框架结构,使得语义理解框架可应用于更广泛的设备场景。
应当理解,本部分所描述的内容并非旨在标识本申请的实施例的关键或重要特征,也不用于限制本申请的范围。本申请的其它特征将通过以下的说明书而变得容易理解。
附图说明
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010592650.5/2.html,转载请声明来源钻瓜专利网。