[发明专利]一种装配流程检测的方法、系统、终端及存储介质有效
申请号: | 202111058920.5 | 申请日: | 2021-09-10 |
公开(公告)号: | CN113743342B | 公开(公告)日: | 2023-08-15 |
发明(设计)人: | 邬君;邱建忠;赵炳彦;彭彪;黄鹏程;周婷婷 | 申请(专利权)人: | 齐鲁工业大学 |
主分类号: | G06V20/40 | 分类号: | G06V20/40;G06V10/82;G06Q10/0639;G06Q50/04 |
代理公司: | 济南格源知识产权代理有限公司 37306 | 代理人: | 韩洪淼 |
地址: | 250353 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 装配 流程 检测 方法 系统 终端 存储 介质 | ||
1.一种装配流程检测的方法,其特征在于,包括:
采集至少一个角度的节点图像并对所述节点图像进行处理,所述节点图像为装配流程节点的拍摄图像;
将所述节点图像导入预先训练的节点识别模型,生成节点的数据集;
记录节点的装配顺序,根据所述装配顺序和数据集生成装配流程日志;
将所述装配流程日志与预设检测标准对比,对装配流程的合理性进行检测;
将所述节点图像导入预先训练的节点识别模型,生成节点的数据集,包括:对所述节点图像进行零件目标检测,获取目标零件信息,所述目标零件信息包括零件类型和零件间的位置关系;根据所述目标零件信息识别当前节点,并记录当前节点的占用时间;根据所述目标零件信息和所述占用时间,生成为当前节点的数据集;
所述检测标准包括:零件类型、零件间的位置关系、占用时间以及装配顺序。
2.根据权利要求1所述的一种装配流程检测的方法,其特征在于,所述方法还包括:
对装配节点进行多种光源试验,得到不同光源条件下的节点图像;
对所述不同光源下节点图像进行数据提取;
根据数据提取结果生成最优的光源条件,所述最优光源条件为零件表面反射光影响最小和识别装配零件最佳的光源角度、光源亮度和光源颜色;
根据所述最优的光源条件发送改变节点的照明条件的信号。
3.根据权利要求1所述的方法,其特征在于,还包括:
采用深度学习算法构建卷积神经网络模型;
采集节点图像作为训练集;
将所述训练集导入所述卷积神经网络模型进行训练,得到节点识别模型。
4.根据权利要求1所述的方法,其特征在于,还包括:
利用数字孪生技术,根据所述装配流程日志,生成数字化装配流程。
5.根据权利要求1所述的一种装配流程检测的方法,其特征在于,所述采集至少一个角度的节点图像并对所述节点图像进行处理,包括:
针对装配流程的各个节点,获取同一时刻且至少一个角度的产品装配的节点图像;
建立所述节点图像和所述装配节点的映射关系;
对节点图像进行背景降噪处理。
6.一种装配流程检测的系统,其特征在于,包括:
图像采集单元,配置用于采集至少一个角度的节点图像并对所述节点图像进行处理,所述节点图像为装配流程节点的拍摄图像;
节点识别单元,配置用于将所述节点图像导入预先训练的节点识别模型,生成节点的数据集,包括:对所述节点图像进行零件目标检测,获取目标零件信息,所述目标零件信息包括零件类型和零件间的位置关系;根据所述目标零件信息识别当前节点,并记录当前节点的占用时间;根据所述目标零件信息和所述占用时间,生成为当前节点的数据集;
日志生成单元,配置用于记录节点的装配顺序,根据所述装配顺序和数据集生成装配流程日志;
流程判断单元,配置用于将所述装配流程日志与预设检测标准对比,对装配流程的合理性进行检测,所述检测标准包括:零件类型、零件间的位置关系、占用时间以及装配顺序。
7.一种终端,其特征在于,包括:
处理器;
用于存储处理器的执行指令的存储器;
其中,所述处理器被配置为执行权利要求1-5任一项所述的方法。
8.一种存储有计算机程序的计算机可读存储介质,其特征在于,该程序被处理器执行时实现如权利要求1-5中任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于齐鲁工业大学,未经齐鲁工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111058920.5/1.html,转载请声明来源钻瓜专利网。