类别特征约束的多目标域表情识别方法
Multi-target domain facial expression recognition based on class-wise feature constraint作者机构:南京信息工程大学自动化学院江苏南京210044 南京航空航天大学计算机科学与技术学院江苏南京211100 南京信息工程大学计算机学院江苏南京210044 南京邮电大学计算机学院江苏南京210023
出 版 物:《计算机工程与科学》 (Computer Engineering & Science)
年 卷 期:2024年第46卷第5期
页 面:836-845页
学科分类:08[工学] 080203[工学-机械设计及理论] 0802[工学-机械工程]
主 题:人脸表情识别 无监督域自适应 多目标域 类别自适应的伪标签 类别特征约束
摘 要:表情识别FER方法通常会受到采集环境和受试者区域、种族等因素的影响。为了提升FER方法的泛化性能,无监督的域自适应表情识别方法UDA-FER成为了研究热点。现有的UDA-FER方法普遍存在2个问题:(1)仅关注对目标域的识别率,导致方法从源域迁移至目标域后,对源域的识别率急剧下降;(2)仅研究基于单个目标域的UDA-FER方法,将现有方法直接应用于多个目标域会导致方法识别率骤降。为解决上述问题,提出了一种类别特征约束的多目标域表情识别方法MTD-FER,实现FER向多个目标域的连续迁移。为了保持对源域的识别率并提高对多个目标域的识别率,MTD-FER设计了类别自适应的伪标签标记CAPL模块和类别特征约束CWFC模块,挑选目标域高质量的样本标记为伪标签,并对齐各个域同类样本的特征,缓解连续迁移导致的灾难性遗忘问题。以RAF-DB为源域,FER-2013和ExpW为目标域,进行大量的实验,证明了MTD-FER的有效性。实验结果表明,与基准方法相比,MTD-FER在多次迁移后,源域识别率提升6.36%,与迁移之前基本持平;在各个目标域性能均有所提升,其中FER-2013性能提升了27.33%,ExpW性能提升了3.03%。