[发明专利]一种界面交互方法及装置

说明书

本发明公开了一种界面交互方法及装置，包括，前端通过移动终端获取车辆图像；后端的服务器基于车辆图像，识别车辆姿态；后端的服务器基于车辆图像，分割并识别车辆外观部件；后端的服务器基于车辆姿态和车辆外观部件，获取带有方位的车辆外观部件；前端的移动终端接收带有方位的车辆外观部件，进行界面交互。从而提高了学习效率和用户体验。

技术领域

本发明属于图像处理技术领域，涉及一种界面交互方法及装置，具体涉及一种基于车辆图像识别车辆姿态以及车辆外观部件的界面交互方法及装置。

背景技术

现有车辆的学习及认识过程中，用户仅能通过书本或网络了解相关的车辆知识及车辆外观部件，无法利用移动终端实现车辆外观部件的快速识别及学习，使车辆相关知识的学习效率低，用户体验差。

发明内容

针对上述问题中存在的不足之处，本发明提供一种界面交互方法及装置。

本发明公开了一种界面交互方法，包括：

获取车辆图像；

基于所述车辆图像，识别车辆姿态；

基于所述车辆图像，分割并识别车辆外观部件；

基于所述车辆姿态和车辆外观部件，获取带有方位的车辆外观部件；

输出带有方位的车辆外观部件，进行界面交互。

作为本发明的进一步改进，所述车辆图像为完整车辆图像。

作为本发明的进一步改进，所述车辆姿态为车辆图像所呈现出的车身方位，包括正前、左前、左中、左后、正后、右后、右中和右前八个方位。

作为本发明的进一步改进，实现所述识别车辆姿态的算法包括VGG、ResNet、MobileNet、NASNet和Inception V3。

作为本发明的进一步改进，实现所述分割并识别车辆外观部件的算法包括Deeplab、PSPNet、SegNet和IDW-CNN。

本发明还公开了一种界面交互装置，包括：前端和后端；

所述前端，

用于通过移动终端获取车辆图像；以及，

用于通过移动终端接收带有方位的车辆外观部件，进行界面交互；

所述后端，

用于通过服务器且基于所述车辆图像，识别车辆姿态；以及，

用于通过服务器且基于所述车辆图像，分割并识别车辆外观部件；以及，

用于通过服务器且基于所述车辆姿态和车辆外观部件，获取带有方位的车辆外观部件，并输出至所述前端。

作为本发明的进一步改进，所述车辆图像为完整车辆图像；

所述车辆姿态为车辆图像所呈现出的车身方位，包括正前、左前、左中、左后、正后、右后、右中和右前八个方位；

所述车辆外观部件包括保险杠、翼子板和车门。

作为本发明的进一步改进，所述服务器包括：

车辆姿态识别模块，用于基于所述车辆图像，识别车辆姿态；

车辆外观部件分割模块，用于基于所述车辆图像，分割并识别车辆外观部件；

关联模块，用于基于所述车辆姿态和车辆外观部件，获取带有方位的车辆外观部件，并输出至所述前端。

作为本发明的进一步改进，实现所述识别车辆姿态的算法包括VGG、ResNet、MobileNet、NASNet和Inception V3。