结合前景特征增强与区域掩码自注意力的细粒度图像分类
Combining foreground feature reinforcement and region mask self-attention for fine-grained image classification作者机构:辽宁工程技术大学软件学院辽宁葫芦岛125105
出 版 物:《智能系统学报》 (CAAI Transactions on Intelligent Systems)
年 卷 期:2022年第17卷第6期
页 面:1134-1144页
核心收录:
学科分类:1305[艺术学-设计学(可授艺术学、工学学位)] 13[艺术学] 081104[工学-模式识别与智能系统] 08[工学] 0804[工学-仪器科学与技术] 081101[工学-控制理论与控制工程] 0811[工学-控制科学与工程]
基 金:国家自然科学基金面上基金项目(42071351) 辽宁省教育厅基础研究项目(LJ2019JL010)
主 题:细粒度图像分类 目标定位 区域掩码 自注意力 多样化特征 特征增强 残差网络 深度学习
摘 要:为解决细粒度图像分类中不相关背景信息干扰以及子类别差异特征难以提取等问题,提出了一种结合前景特征增强和区域掩码自注意力的细粒度图像分类方法。首先,利用ResNet50提取输入图片的全局特征;然后通过前景特征增强网络定位前景目标在输入图片中的位置,在消除背景信息干扰的同时对前景目标进行特征增强,有效突出前景物体;最后,将特征增强的前景目标通过区域掩码自注意力网络学习丰富、多样化且区别于其他子类的特征信息。在训练模型的整个过程,建立多分支损失函数约束特征学习。实验表明,该模型在细粒度图像数据集CUB-200-2011、Stanford Cars和FGVC-Aircraft的准确率分别达到了88.0%、95.3%和93.6%,优于其他主流方法。