[发明专利]用于在机器人拣选时快速物体检测的系统和方法在审
申请号: | 201911132136.7 | 申请日: | 2019-11-18 |
公开(公告)号: | CN111199562A | 公开(公告)日: | 2020-05-26 |
发明(设计)人: | 李想;常鹏;程辉;刘正茂 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;京东美国科技公司 |
主分类号: | G06T7/73 | 分类号: | G06T7/73;G06T7/13 |
代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 倪斌 |
地址: | 100086 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 机器人 拣选 快速 物体 检测 系统 方法 | ||
1.一种用于从多个物体中确定目标物体的姿态的系统,所述系统包括计算设备和与所述计算设备通信的视觉传感器,所述计算设备包括处理器和存储计算机可执行代码的存储设备,其中,所述计算机可执行代码在所述处理器处执行时,被配置为:
从图像中提取图像关键点,其中,所述图像是通过所述视觉传感器对感兴趣区域捕获得到的,所述感兴趣区域包括所述多个物体,并且所述关键点中的每个关键点用其位置和特征描述符来定义;
取得所述目标物体的模板,其中,所述模板包括多个模板侧表面,所述模板侧表面中的每个模板侧表面以多个模板关键点来表征,并且所述模板关键点中的每个模板关键点用其位置和特征描述符来定义;
将所述图像关键点与所述模板侧表面中的每个模板侧表面中的所述模板关键点进行匹配;
基于所述图像关键点与所述模板侧表面中的一个模板侧表面中的所述模板关键点之间的匹配的数量,来选择所述模板侧表面中的所述一个模板侧表面;
从所选择的模板侧表面中挑选两个模板关键点,并且确定分别与所挑选的两个模板关键点匹配的两个图像关键点;
基于所确定的两个图像关键点来构建边界框,其中,所述边界框表示与所述模板的所选择的模板侧表面相对应的图像侧表面;
确定内点关键点,其中所述内点关键点位于所述边界框内部,并且在所选择的模板侧表面中具有匹配的模板关键点;
使用所述内点关键点来精细化所述边界框,
其中,基于精细化后的边界框来确定所述目标物体的姿态。
2.根据权利要求1所述的系统,其中,所述计算机可执行代码被配置为在提取图像关键点之前定义针对所述图像中的物体的掩模。
3.根据权利要求1所述的系统,其中,所述计算机可执行代码被配置为执行以下步骤:选择所述模板侧表面中具有大量匹配的一个模板侧表面,并且以预定次数迭代地从所选择的模板侧表面中挑选两个模板关键点。
4.根据权利要求3所述的系统,其中,所述模板侧表面中的每个模板侧表面被选择了占所述预定次数的百分比的次数,并且所述百分比是通过将所选择的模板侧表面中的匹配的关键点的数量除以所有所述模板侧表面中的匹配的关键点的总数量来确定的。
5.根据权利要求1所述的系统,其中,所挑选的两个模板关键点相距至少5个像素,并且所挑选的两个模板关键点中的每个模板关键点与所述图像关键点之一相匹配。
6.根据权利要求1所述的系统,
其中,所述两个模板关键点是随机地从所选择的模板侧表面中选择的;
其中,所述计算机可执行代码被配置为执行以下步骤:挑选两个模板关键点,确定两个匹配的图像关键点,构建所述边界框,确定内点关键点,以及迭代地精细化所述边界框;并且
其中,每次迭代产生精细化后的边界框,所述精细化后的边界框中的每个边界框以基于内点关键点的数量和所述精细化之前与之后的差异的置信度值来表征,并且具有最高置信度值的所述边界框用于确定所述目标物体的姿态。
7.根据权利要求6所述的系统,其中,当所述差异被定义为所述边界框和所述模板的侧表面之间的尺度变化时,在所述边界框的每个侧边缘的长度除以所述模板的所述侧表面的对应侧边缘的长度在0.8至1.25的范围之外的情况下,将所述精细化之前的所述边界框保留为所述精细化后的边界框,并且减小所述精细化后的边界框的置信度值。
8.根据权利要求1所述的系统,其中,将所述目标物体的姿态提供给用于操纵所述目标物体的机器人设备。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;京东美国科技公司,未经北京京东尚科信息技术有限公司;京东美国科技公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911132136.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:存储器电路和半导体器件
- 下一篇:用于提取语义三元组以建立知识库的系统