[发明专利]一种冰箱内部食材的识别方法、设备及图像识别系统在审
申请号: | 201810397334.5 | 申请日: | 2018-04-28 |
公开(公告)号: | CN108615015A | 公开(公告)日: | 2018-10-02 |
发明(设计)人: | 刘兆祥;王国栋;刘照光 | 申请(专利权)人: | 海信(山东)冰箱有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00 |
代理公司: | 北京中博世达专利商标代理有限公司 11274 | 代理人: | 袁方 |
地址: | 266736 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 图像处理服务器 冰箱 食材 层架 图像识别系统 储物间 图像 图像处理领域 室内 结果发送 图像区域 直线检测 终端设备 | ||
1.一种冰箱内部食材的识别方法,其特征在于,包括:
图像处理服务器获取冰箱的储物间室内的图像,所述图像包括所述冰箱的储物间室内的每个层架的食材;
所述图像处理服务器通过直线检测的方式将所述图像按照层架进行分离;
所述图像处理服务器对每个层架对应的图像区域包含的食材进行识别;
所述图像处理服务器通将识别结果发送至终端设备。
2.根据权利要求1所述的方法,其特征在于,所述图像处理服务器对每个层架对应的图像区域包含的食材进行识别,包括:
在每一层架对应的图像区域设置至少一个候选框,其中所述至少一个候选框横向排列;
在所述候选框周围设置至少两个识别框,其中所述识别框覆盖的像素区域包含所述候选框覆盖的像素区域,并且所述至少两个识别框的像素位置不重合;
通过卷积神经网络对所述识别框中的食材进行识别,获取识别结果。
3.根据权利要求1所述的方法,其特征在于,所述获取识别结果之前还包括:
若确定所述候选框对应的至少两个识别框的识别结果对应同一食材,则保留任一识别框的识别结果。
4.一种图像处理服务器,其特征在于,包括:
获取模块,用于获取冰箱的储物间室内的图像,所述图像包括所述冰箱的储物间室内的每个层架的食材;
处理模块,用于通过直线检测的方式将所述获取模块获取的图像按照层架进行分离;
所述处理模块,还用于对每个层架对应的图像区域包含的食材进行识别;
发送模块,用于将处理模块生成的识别结果发送至所述终端设备。
5.根据权利要求4所述的图像处理服务器,其特征在于,所述处理模块具体用于在每一层架对应的图像区域设置至少一个候选框,其中所述至少一个候选框横向排列;在所述候选框周围设置至少两个识别框,其中所述识别框覆盖的像素区域包含所述候选框覆盖的像素区域,并且所述至少两个识别框的像素位置不重合;通过卷积神经网络对所述识别框中的食材进行识别,获取识别结果。
6.根据权利要求4所述的图像处理服务器,其特征在于,所述处理模块还用于若确定所述候选框对应的至少两个识别框的识别结果对应同一食材,则保留任一识别框的识别结果。
7.一种图像识别系统,其特征在于,包括冰箱、终端设备以及如权利要求4-6任一项所述的图像处理服务器;
其中,所述冰箱中设置有图像采集装置,用于采集冰箱的储物间室内的图像,其中所述图像包括所述冰箱的储物间室内的每个层架的食材。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于海信(山东)冰箱有限公司,未经海信(山东)冰箱有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810397334.5/1.html,转载请声明来源钻瓜专利网。