级联残差优化Transformer网络的图像超分辨率重建

作     者：林坚普 吴镇城 王崑赋 林志贤 郭太良 林珊玲 LIN Jianpu;WU Zhencheng;WANG Kunfu;LIN Zhixian;GUO Tailiang;LIN Shanling

作者机构：福州大学先进制造学院福建泉州362252 中国福建光电信息科学与技术创新实验室福建福州350116 福州大学物理与信息工程学院福建福州350116 

出 版 物：《光学精密工程》 (Optics and Precision Engineering)

年 卷 期：2024年第32卷第12期

页      面：1902-1914页

核心收录：

学科分类：0810[工学-信息与通信工程] 081203[工学-计算机应用技术] 08[工学] 0835[工学-软件工程] 0812[工学-计算机科学与技术（可授工学、理学学位）] 

基　　金：国家重点研发计划资助(No.2023YFB3609400) 国家自然科学基金青年科学基金(No.62101132) 

主　　题：卷积神经网络 图像超分辨率重建 残差网络 Transformer 注意力机制 

摘      要：为了扩展图像超分辨率算法中卷积神经网络在多个尺度特征上的自适应学习能力,提升网络性能,本文提出一种基于级联残差方法的Transformer网络优化结构进行图像超分辨率重建。首先,该网络采用级联残差结构,增强了网络对低阶和中阶特征的迭代复用和信息共享能力;其次,将通道注意力机制引入Transformer结构中,增强网络的特征表达和自适应学习通道权重的能力;最后,优化Transformer网络结构中的感知模块为级联感知模块,扩展网络深度,增强模型的特征表达能力。在数据集Set5,Set14,BSD100,Urban100和Manga109上进行放大2倍、3倍和4倍的重建测试并与主流方法进行对比,客观评价结果表明,在4倍放大因子的Set5数据集下,本文方法所得图像的峰值信噪比对比其他主流方法平均值提升1.14 dB,结构相似度平均值提升0.019。结合主观评价结果表明,本文方法相比其他主流方法的图像重建效果更好,恢复得到的图像纹理细节更清晰。