[发明专利]业务模型强化学习方法以及装置在审
申请号: | 201811589792.5 | 申请日: | 2018-12-25 |
公开(公告)号: | CN110020728A | 公开(公告)日: | 2019-07-16 |
发明(设计)人: | 韩伟伟;周扬;任建伟 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06N20/00 | 分类号: | G06N20/00 |
代理公司: | 北京智信禾专利代理有限公司 11637 | 代理人: | 吴肖肖 |
地址: | 英属开曼群岛大开*** | 国省代码: | 开曼群岛;KY |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 强化学习 业务模型 目标业务 业务操作 业务策略 业务执行 样本 模型生成 曲线构建 业务目标 优化调整 申请 引入 | ||
1.一种业务模型强化学习方法,其特征在于,包括:
获取业务样本;
基于所述业务样本对初始业务模型进行强化学习,获得目标业务模型;所述初始业务模型基于执行业务操作所依赖的业务策略曲线构建;
基于所述目标业务模型生成执行所述业务操作所依赖的目标业务策略曲线。
2.根据权利要求1所述的业务模型强化学习方法,其特征在于,所述业务样本包括:历史时间段内的业务样本;
相应的,所述基于所述业务样本对初始业务模型进行强化学习,获得目标业务模型,包括:
基于所述历史时间段内的业务样本,对所述初始业务模型进行强化学习,强化学习之后获得所述业务样本对应的学习奖励;
判断所述学习奖励是否大于或者等于目标奖励;
若是,将所述学习奖励对应的业务样本作为最优业务样本,并将基于所述最优业务样本进行强化学习之后的业务模型作为所述目标业务模型。
3.根据权利要求1所述的业务模型强化学习方法,其特征在于,所述业务样本包括:历史时间段内的业务样本;
相应的,所述基于所述业务样本对初始业务模型进行强化学习,获得目标业务模型,包括:
基于所述历史时间段内的业务样本,对所述初始业务模型进行强化学习,获得所述业务样本对应的学习奖励;
将所述历史时间段内学习奖励最高的业务样本作为最优业务样本;
将所述最优业务样本对所述初始业务模型进行强化学习之后的业务模型,作为所述目标业务模型。
4.根据权利要求1所述的业务模型强化学习方法,其特征在于,所述获取业务样本步骤执行之后,且所述基于所述业务样本对初始业务模型进行强化学习,获得目标业务模型步骤执行之前,包括:
确定在基准执行条件下执行所述业务操作的业务执行目标。
5.根据权利要求4所述的业务模型强化学习方法,其特征在于,所述基于所述业务样本对初始业务模型进行强化学习,获得目标业务模型,包括:
基于所述业务样本对初始业务模型进行强化学习,强化学习之后获得业务模型;
基于所述业务模型生成执行所述业务操作的强化业务策略曲线;
判断按照所述强化业务策略曲线执行所述业务操作的业务执行结果是否满足所述业务执行目标;
若是,将所述强化学习之后获得业务模型作为所述目标业务模型。
6.根据权利要求1至5任意一项所述的业务模型强化学习方法,其特征在于,所述基于所述目标业务模型生成执行所述业务操作所依赖的目标业务策略曲线,包括:
根据所述目标业务模型确定所述业务策略曲线的目标参数;
基于所述目标参数和所述业务策略曲线的曲线表达式,确定所述目标业务策略曲线。
7.根据权利要求1所述的业务模型强化学习方法,其特征在于,所述初始业务模型,采用如下方式构建:
确定所述业务策略曲线涉及的业务数据;
对所述业务数据进行预处理;
基于所述预处理后的业务数据以及所述业务策略曲线的曲线表达式,构建所述初始业务模型。
8.根据权利要求7所述的业务模型强化学习方法,其特征在于,所述业务数据,包括下述至少一项:
业务操作、业务操作的执行条件、业务操作的执行结果。
9.根据权利要求6至8任意一项所述的业务模型强化学习方法,其特征在于,所述曲线表达式的底数包括所述业务操作,所述业务操作的执行结果为所述曲线表达式中所述底数对应指数的一个组成部分。
10.根据权利要求1所述的业务模型强化学习方法,其特征在于,所述基于所述目标业务模型生成执行所述业务操作所依赖的目标业务策略曲线步骤执行之后,包括:
按照所述目标业务策略曲线确定的业务策略阈值执行所述业务操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811589792.5/1.html,转载请声明来源钻瓜专利网。