基于时序融合策略的深度卷积网络动态表情识别

作     者：许春和 宋领赟 Xu Chunhe;Song Lingyun

作者机构：绥化学院电气工程学院绥化152000 

出 版 物：《国外电子测量技术》 (Foreign Electronic Measurement Technology)

年 卷 期：2021年第40卷第10期

页      面：151-157页

学科分类：1305[艺术学-设计学（可授艺术学、工学学位）] 13[艺术学] 081104[工学-模式识别与智能系统] 08[工学] 0804[工学-仪器科学与技术] 081101[工学-控制理论与控制工程] 0811[工学-控制科学与工程] 

基　　金：2019年黑龙江省教育厅基本科研业务费项目(KYYWF10236190111)资助 

主　　题：动态表情识别 主动外观模型 深度卷积神经网络 损失函数 

摘      要：静态表情识别是对单一图像进行特征提取及学习训练,相比于动态表情识别缺少表情变化的时间动态信息。为利用上表情在时间上的变化特征,提出基于时序融合策略的深度网络动态表情识别方法。首先分析动态表情变化平静-高峰的过程,利用主动外观模型(AAM),定义峰值距离(PD)和相邻距离(ND),利用两个参数对表情序列进行筛选,除去中性及表达不明显的表情;采用连续4帧序列作为输入,并使用3个VGGFace深度卷积网络分别对输入进行训练,通过构建分类损失函数和排序损失函数将3个网络关联起来,从而达到融合表情序列时间信息的目的;最后通过CK+数据库实验验证表明,所提方法结合了深层次卷积网络特征提取的能力以及表情变化信息融合的优势,对比近年表情识别算法,在识别率上具有较强的优势。