[实用新型]具有视觉语义感知的机器人虚实交互操作执行系统

摘要

本实用新型提出了一种具有视觉语义感知的机器人虚实交互操作执行系统，该系统包括：构建组件用于构建真实环境或仿真环境确定相应的神经网络参数模型；视觉语义感知组件用于根据神经网络参数模型确定待抓取物体的感兴趣区域，以计算抓取感兴趣区域的目标点位信息；规划组件用于根据目标点位信息对待抓取物体进行避障和轨迹规划，确定抓取执行操作命令；执行组件用于根据抓取执行操作命令控制真实机械臂或仿真机械臂的动作，完成抓取操作命令。该系统可用于机器人系统的快速原型开发，算法测试，精确的室内室外环境仿真，有效可靠的性能评估，以及直观可视化的交互显示。