[发明专利]面向人脸表情识别的迁移卷积神经网络方法在审

专利信息
申请号: 201811398259.0 申请日: 2018-11-22
公开(公告)号: CN109376692A 公开(公告)日: 2019-02-22
发明(设计)人: 刘伦豪杰;费峻涛;王家豪 申请(专利权)人: 河海大学常州校区
主分类号: G06K9/00 分类号: G06K9/00;G06K9/62;G06N3/04
代理公司: 南京纵横知识产权代理有限公司 32224 代理人: 董建林;张欢欢
地址: 213022 *** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 卷积神经网络 迁移 人脸表情识别 测试集 训练集 验证集 表情图像数据 人脸表情图像 表情类别 人脸表情 网络模型 优化训练 数据集 小数据 准确率 构建 级联 卷积 拟合 收敛 网络 测试 输出 优化
【说明书】:

发明公开了面向人脸表情识别的迁移卷积神经网络方法,包括以下过程:S1,获取人脸表情图像数据集,将其划分成训练集、验证集与测试集;S2,将迁移网络和卷积神经网络级联构建迁移卷积神经网络模型;迁移卷积网络模型的输入为人脸表情图像数据,输出为人脸表情类别;S3,利用训练集对迁移卷积神经网络模型进行训练,并利用验证集来优化训练好的迁移卷积神经网络模型;S4,通过优化后的迁移卷积神经网络模型,对测试集进行人脸表情识别的准确率测试。本发明利用迁移卷积神经网络识别人脸表情,解决了小数据集在大量网络上无法收敛和过拟合的问题。

技术领域

本发明涉及图像识别技术领域,具体涉及一种面向人脸表情识别的迁移卷积神经网络方法。

背景技术

人脸表情识别是人机交互与情感计算研究中的重要组成部分。随着人工智能的发展和机器人制造体系的成熟,人机交互领域显现出巨大的市场和应用前景。

传统的人脸表情识别研究方法主要基于几何特征,对人的眼睛、眉毛、嘴等位置变化特征进行表情识别。都需要人为设定特征,提取特征的信息量相当局限,准确率难以达到应用要求。

随着高性能服务器的发展,以卷积神经网络为代表的深度学习算法广泛应用到了计算机视觉、自动驾驶等领域中,取得了很好的效果。基于卷积神经网络的表情识别方法通过数据驱动,构建卷积层从表情数据库中学习提取抽象的特征信息,最后使用全连接层分类。然而,深度卷积网络依赖于数据驱动,很多数据集中的静态面部表情图片太少,在无法得到上百万大规模数据集时,直接训练效果不够理想,容易产生过拟合,识别的泛化效果较差。

发明内容

为了克服现有技术上的不足,本发明提供了一种面向人脸表情识别的迁移卷积神经网络方法,利用迁移卷积神经网络识别人脸表情,解决了小数据集在大量网络上无法收敛和过拟合的问题。

为了解决上述技术问题,本发明提供了一种面向人脸表情识别的迁移卷积神经网络方法,其特征是,包括以下步骤:

S1,获取人脸表情图像数据集,将其划分成训练集、验证集与测试集;

S2,将迁移网络和卷积神经网络级联构建迁移卷积神经网络模型;迁移卷积网络模型的输入为人脸表情图像数据,输出为人脸表情类别;

S3,利用训练集对迁移卷积神经网络模型进行训练,并利用验证集来优化训练好的迁移卷积神经网络模型;

S4,通过优化后的迁移卷积神经网络模型,对测试集进行人脸表情识别的准确率测试。

进一步的,S1中,获取人脸表情图像数据集包括以下过程:

S11,获取CK+和FER2013人脸表情图像数据集;

S12,扩展CK+数据集;

S13,对CK+和FER2013数据集进行图像归一化。

进一步的,迁移网络为Inception_v3网络。

进一步的,迁移网络包括6个卷积层、3个Inception层、2个池化层和1个全连接层,在级联时去除全连接层。

进一步的,卷积神经网络包括1个卷积层、1个池化层以及一个全连接层。

进一步的,人脸表情类别包括生气、厌恶、恐惧、高兴、悲伤、惊讶和中性。

本发明的有益效果包括:

1)、本发明对原数据集进行了图像处理,一方面扩展了表情图像数据集的数量,另一方面利用opencv将48x48x1的二维灰度图像转化为229x229x3的三维高分辨率图像,大大减少了表情信息在迁移网络中的丢失的可能性,间接提高了表情识别的效果。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于河海大学常州校区,未经河海大学常州校区许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201811398259.0/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top