[发明专利]心率检测方法、系统、终端设备及存储介质

权利要求书

1.一种心率检测方法，其特征在于，包括：

获取面部视频帧序列，利用YOLOv3模型提取所述面部视频帧序列中的人脸序列；

将人脸序列中的人脸区域从RGB颜色空间转换到YUV颜色空间；

将转换后的人脸区域的视频帧序列转变为时空特征图，包括：

将转换后的人脸区域分块，得到多个子区域；

根据所述子区域，分别取YUV颜色空间中三个颜色通道的平均值，组合得到子区域向量；

将多个子区域向量按划分顺序进行拼接，得到空间特征矩阵；

将每一帧的空间特征矩阵按时间顺序进行拼接，得到时空特征图；

利用ResNet-18模型提取时空特征图的第一特征；

利用POS模型提取转换前的人脸区域的第二特征，包括：

根据转换前的人脸区域，分别取RGB三个通道的平均值，组合得到颜色信号矩阵；

对所述颜色信号矩阵进行归一化处理，将归一化的颜色信号矩阵投影到正交投影方向，经投影分解得到正交投影方向上的投影向量；

对投影向量进行标准差项处理，得到粗粒度心率信号；

利用傅里叶变换将粗粒度心率信号从时域变换到频域，将得到的频域信号作为第二特征；

将所述第一特征与所述第二特征进行拼接，利用心率预测网络提取拼接特征中的心率值。

2.根据权利要求1所述的心率检测方法，其特征在于，所述获取面部视频帧序列，利用YOLOv3模型提取所述面部视频帧序列中的人脸序列，包括：

利用YOLOv3模型对面部视频的每一帧进行人脸检测，得到至少一个包含人脸区域的矩形框及矩形框的置信度；

获取置信度最高的矩形框的对角所截取的人脸区域，对截取的人脸区域进行组合，得到人脸序列。

3.根据权利要求1或2任一项所述的心率检测方法，其特征在于，所述心率预测网络包括两层全连接层。

4.一种心率检测系统，其特征在于，包括：

人脸序列提取单元，用于获取面部视频帧序列，利用YOLOv3模型提取所述面部视频帧序列中的人脸序列；

颜色空间转换单元，用于将人脸序列中的人脸区域从RGB颜色空间转换到YUV颜色空间；

特征提取单元，用于

将转换后的人脸区域的视频帧序列转变为时空特征图，包括：

将转换后的人脸区域分块，得到多个子区域；

根据所述子区域，分别取YUV颜色空间中三个颜色通道的平均值，组合得到子区域向量；

将多个子区域向量按划分顺序进行拼接，得到空间特征矩阵；

将每一帧的空间特征矩阵按时间顺序进行拼接，得到时空特征图；

利用ResNet-18模型提取时空特征图的第一特征；

利用POS模型提取转换前的人脸区域的第二特征，包括：

根据转换前的人脸区域，分别取RGB三个通道的平均值，组合得到颜色信号矩阵；

对所述颜色信号矩阵进行归一化处理，将归一化的颜色信号矩阵投影到正交投影方向，经投影分解得到正交投影方向上的投影向量；

对投影向量进行标准差项处理，得到粗粒度心率信号；

利用傅里叶变换将粗粒度心率信号从时域变换到频域，将得到的频域信号作为第二特征；

心率检测单元，用于将所述第一特征与所述第二特征进行拼接，利用心率预测网络提取拼接特征中的心率值。

5.根据权利要求4所述的心率检测系统，其特征在于，所述人脸序列提取单元，还用于：

利用YOLOv3模型对面部视频的每一帧进行人脸检测，得到至少一个包含人脸区域的矩形框及矩形框的置信度；

获取置信度最高的矩形框的对角所截取的人脸区域，对截取的人脸区域进行组合，得到人脸序列。

6.一种终端设备，其特征在于，包括：处理器、存储器以及存储在所述存储器中且被配置为由所述处理器执行的计算机程序，所述处理器执行所述计算机程序时实现如权利要求1至3中任一项所述的心率检测方法。

7.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行实现如权利要求1至3任一项所述的心率检测方法。