[发明专利]基于人机交互的收银纠错方法及装置在审

专利信息
申请号: 202110271596.9 申请日: 2021-03-12
公开(公告)号: CN112668558A 公开(公告)日: 2021-04-16
发明(设计)人: 张飞云;张鹏 申请(专利权)人: 浙江口碑网络技术有限公司;口碑(上海)信息技术有限公司
主分类号: G06K9/00 分类号: G06K9/00;G06K9/62;G06F3/0481
代理公司: 北京市浩天知识产权代理事务所(普通合伙) 11276 代理人: 宋菲
地址: 310012 浙江省杭州市西*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 基于 人机交互 收银 纠错 方法 装置
【说明书】:

发明实施例公开了一种基于人机交互的收银纠错方法及装置。方法包括:获取并呈现对商品图像所识别得到的至少一个第一商品识别结果;至少一个第一商品识别结果由商品识别模型输出得到;监测用户在人机交互界面针对任一第一商品识别结果执行的选择操作及更正操作,获取用户更正数据,用户更正数据包含第二商品识别结果,第二商品识别结果为所选择的第一商品识别结果的纠错结果。利用本发明实施例,用户在发现商品识别错误时能及时地进行更正纠错,提升了商品结算的准确率。

技术领域

本发明实施例涉及智慧收银技术领域,具体涉及一种基于人机交互的收银纠错方法、装置、计算设备及计算机存储介质,还涉及一种商品识别模型的训练方法、装置、计算设备及计算机存储介质。

背景技术

智慧门店是一种可以由消费者自助选购及自助结算的线下门店。相较于传统的线下门店,智慧门店具有人工成本低、结算效率高、以及便于管理等特点。

智慧门店通过收银设备对消费者选取的商品进行自动识别,继而完成消费结算。现有技术中,通常采用机器学习算法来训练商品识别模型,并利用该商品识别模型来识别消费者选取的商品。

现有技术中常常需专业的算法人员定期地从海量数据中筛选出样本数据,并通过人工标注的方式对样本进行标注,继而利用标注后的样本数据对商品识别模型进行更新。然而,采用该种方式不仅无法及时更新商品识别模型,影响了商品识别模型的识别精度,导致商品识别准确率不高;而且现有技术依赖于算法人员对训练样本的人工筛选及标注,从而存在人工成本高及模型更新效率低下的弊端。

发明内容

鉴于上述问题,提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的基于人机交互的收银纠错方法、装置、计算设备及计算机存储介质。

根据本发明实施例的一个方面,提供了一种基于人机交互的收银纠错方法,包括:

获取对拍摄得到的商品图像所识别得到的至少一个第一商品识别结果,在人机交互界面中呈现所述至少一个第一商品识别结果;其中,所述至少一个第一商品识别结果由训练得到的商品识别模型输出得到;

监测用户在所述人机交互界面针对任一第一商品识别结果执行的选择操作及更正操作,获取用户更正数据,所述用户更正数据包含第二商品识别结果,所述第二商品识别结果为所选择的第一商品识别结果的纠错结果。

在一种可选的方式中,所述方法还包括:将所述第二商品识别结果反馈至服务端,以供所述服务端根据所述第二商品识别结果对所述商品识别模型进行更新训练。

在一种可选的方式中,所述将所述第二商品识别结果反馈至服务端,以供所述服务端根据所述第二商品识别结果对所述商品识别模型进行更新训练具体为:将所述第二商品识别结果反馈至服务端,以供所述服务端将所述第二商品识别结果作为商品图像的标注结果,对所述商品识别模型进行更新训练。

在一种可选的方式中,所述人机交互界面包含各个第一商品识别结果对应的响应区,所述各个第一商品识别结果对应的响应区互不重叠;

监测用户在所述人机交互界面针对任一第一商品识别结果执行的选择操作进一步包括:

监测用户在所述人机交互界面执行的选择操作,定位所述选择操作对应的响应区;

根据所述选择操作对应的响应区,确定用户所选择的第一商品识别结果。

在一种可选的方式中,监测用户在所述人机交互界面针对任一第一商品识别结果执行的更正操作,获取用户更正数据进一步包括:

在人机交互界面中呈现至少一个备选商品识别结果;

监测用户从所述至少一个备选商品识别结果选择任一备选商品识别结果的更正操作,获取所选择的备选商品识别结果作为所述第二商品识别结果。

在一种可选的方式中,所述至少一个备选商品识别结果具体为由所述商品识别模型输出得到的置信度低于所述第一商品识别结果的商品识别结果。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江口碑网络技术有限公司;口碑(上海)信息技术有限公司,未经浙江口碑网络技术有限公司;口碑(上海)信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110271596.9/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top