[发明专利]图像处理系统、方法、设备、可读存储介质及程序产品

权利要求书

1.一种图像处理系统，其特征在于，所述系统包括面部表情分析装置、触觉反馈装置和控制模块；所述面部表情分析装置与所述触觉反馈装置通过控制模块连接；

所述面部表情分析装置用于采集目标对象的图像，并基于预先训练的改进后的Xception网络模型对所述图像进行分析，得到目标对象在交流时的情感状态信息；

所述控制模块用于接收所述面部表情分析装置输出的情感状态信息，并根据所述情感状态信息向所述触觉反馈装置发送相应的控制指令；

所述触觉反馈装置包括用于供用户触摸的感受区，以根据所述控制指令通过所述感受区向所述用户提供与所述情感状态信息对应的触觉反馈。

2.根据权利要求1所述的系统，其特征在于，所述面部表情分析装置包括图像采集模块和图像处理模块；

所述图像采集模块用于采集所述目标对象的视频流；

所述图像处理模块用于对采集的视频流进行分割处理得到多帧图片，针对每一帧图片，通过面部区域提取单元确定所述图片中的面部区域，通过预先训练的改进后的Xception网络模型提取所述面部区域的特征，并基于提取的特征得到与所述图片对应的情感状态信息。

3.根据权利要求2所述的系统，其特征在于，所述图像处理模块在通过预先训练的改进后的Xception网络模型得到与所述图片对应的情感状态信息时，具体用于：

通过所述改进后的Xception网络模型确定所述图片对应的多种情感状态信息，以及与每种情感状态信息对应的置信度；

通过比较各个置信度得到数值最高的置信度，将数值最高的置信度与预设置信度阈值比较；

当所述数值最高的置信度大于所述预设置信度阈值时，将所述数值最高的置信度对应的情感状态信息确定为与所述图片对应的情感状态信息；

当所述数值最高的置信度小于等于所述预设置信度阈值时，向所述控制模块发送用于表示未检测到情感状态的信息，以使所述控制模块控制所述触觉反馈装置停止提供触觉反馈。

4.根据权利要求1所述的系统，其特征在于，所述触觉反馈装置还包括震动模块和温度调节模块，以供所述用户通过震动和/或温度区分情感状态信息；

所述震动模块与所述控制模块连接，用于在接收到所述控制模块输出的控制指令时根据所述控制指令向所述感受区传递不同模式的震动；

所述震动模式包括下述至少一种：长时强震动，短时强震动，长时弱震动和短时弱震动；

所述温度调节模块与所述控制模块连接，用于在接收到所述控制模块输出的控制指令时根据所述控制指令对所述感受区进行制冷或加热。

5.根据权利要求4所述的系统，其特征在于，所述震动模块包括马达，所述温度调节模块包括第一半导体制冷器和第二半导体制冷器，所述第一半导体制冷器用于接收所述控制模块输出的制冷指令，并根据所述制冷指令产生制冷效果；所述第二半导体制冷器用于接收所述控制模块输出的制热指令，并根据所述制热指令产生制热效果；所述感受区与所述第一半导体制冷器的距离小于与所述第二半导体制冷器的距离。

6.根据权利要求4所述的系统，其特征在于，所述触觉反馈装置还包括温度传感器，所述温度传感器用于获取所述感受区的温度信息；

所述控制模块还用于：获取所述温度传感器采集到的温度信息；若所述温度信息大于预设阈值，则向所述触觉反馈装置输出停止制热的控制指令。

7.根据权利要求6所述的系统，其特征在于，所述触觉反馈装置还包括散热模块；

所述控制模块还用于：

当所述温度传感器检测到温度信息大于预设阈值时，启动散热模块；

若在所述第二半导体制冷器制热过程中，输出制冷指令，则启动所述散热模块；

若所述第一半导体制冷器处于制冷过程，则启动所述散热模块。

8.根据权利要求1-7任一项所述的系统，其特征在于，所述系统还包括调试反馈装置，所述调试反馈装置在训练和测试所述改进后的Xception网络模型时，用于显示单帧图片、通过所述面部区域提取单元定位的图片中的面部区域以及通过所述改进后的Xception网络模型所预测的情感状态信息。