[发明专利]智能冰箱中基于Faster‑RCNN的多目标检测方法

摘要

本发明公开一种智能冰箱中基于Faster‑RCNN的多目标检测方法，步骤是拍摄冰箱冷藏室内物品图片，并传输至云端；将图片送入多目标检测网络，包括如下内容将图像数据输入到VGG16基础网络中进行图像特征的提取；在VGG16的最后一层特征图上进行RPN网络搜索，判断是否存在目标及进行坐标回归，然后对可能存在目标的区域进行分类与坐标回归修正，并进行非极大值抑制；将识别分数处于设定范围之内的多目标检测框重新收集整合进行再识别；当再识别检测完毕后，结合第一次识别高于置信度阈值的目标检测结果在移动端应用中进行最终整体展示。此种方法在物体识别时无需进行图像分割，提高对小目标及分辨率较低目标的识别效果，进一步提高目标识别的准确率，降低误检率。

主权项

一种智能冰箱中基于Faster‑RCNN的多目标检测方法，其特征在于包括如下步骤：步骤1，利用冰箱内置摄像头，拍摄冰箱冷藏室内物品图片，并将图片传输至云端；步骤2，将图片送入多目标检测网络，包括如下内容：步骤21，将图像数据输入到VGG16基础网络中进行图像特征的提取；步骤22，在VGG16的最后一层特征图上进行RPN网络搜索，在特征图上的每个滑动窗口位置生成特征向量，并将各特征向量送入两个并列的全连接层做预测，判断是否存在目标及进行坐标回归，然后对RPN提取的可能存在的目标区域进行分类与坐标回归修正，并对目标区域进行非极大值抑制；步骤23，将识别分数处于设定范围之内的多目标检测框重新收集整合进行再识别；步骤3，当再识别检测完毕后，结合第一次识别分数高于置信度阈值的目标检测结果在移动端应用中进行最终整体展示。