细化Transformer网络的弱监督图像语义分割

作     者：孙万春 冯欣 马慧 胡立松 Sun Wanchun;Feng Xin;Ma Hui;Hu Lisong

作者机构：长春理工大学计算机科学技术学院长春130022 长春理工大学重庆研究院重庆401122 安徽警官职业学院计算机基础教研室合肥230031 北科天绘(合肥)激光技术有限公司研发部合肥230041 

出 版 物：《计算机应用研究》 (Application Research of Computers)

年 卷 期：2023年第40卷第11期

页      面：3515-3520页

学科分类：08[工学] 080203[工学-机械设计及理论] 0802[工学-机械工程] 

基　　金：安徽省自然科学研究重点资助项目(KJ2021A1471) 

主　　题：深度学习 弱监督学习 图像语义分割 Transformer 

摘      要：图像级标签的弱监督图像语义分割方法是目前比较热门的研究方向,类激活图生成方式是最为常用的解决该类问题的主要工作方法。由于类激活图的稀疏性,导致判别区域的准确性降低。针对上述问题,提出了一种改进的Transformer网络弱监督图像学习方法。首先,引入空间注意力交换层来扩大类激活图的覆盖范围;其次,进一步设计了一个注意力自适应模块来指导模型增强弱区域的类响应;特别地,在类生成过程中,构建了一个自适应跨域来提高模型分类性能。该方法在Pascal VOC 2012验证集和测试集上分别达到了73.5%和73.0%。实验结果表明,细化Transformer网络学习方法有助于提高弱监督图像的语义分割性能。