检索结果-南通市图书馆

红外技术 2024年第5期46卷 510-521页

作者：邸敬任莉刘冀钊郭文庆廉敬兰州交通大学电子与信息工程学院甘肃兰州730070 兰州大学信息科学与工程学院甘肃兰州730000

针对现有深度学习图像融合方法依赖卷积提取特征,并未考虑源图像全局特征,融合结果容易产生纹理模糊、对比度低等问题,本文提出一种基于三分支对抗学习和补偿注意力的红外和可见光图像融合方法。首先,生成器网络采用密集块和补偿注意力... 详细信息

针对现有深度学习图像融合方法依赖卷积提取特征,并未考虑源图像全局特征,融合结果容易产生纹理模糊、对比度低等问题,本文提出一种基于三分支对抗学习和补偿注意力的红外和可见光图像融合方法。首先,生成器网络采用密集块和补偿注意力机制构建局部-全局三分支提取特征信息。然后,利用通道特征和空间特征变化构建补偿注意力机制提取全局信息,更进一步提取红外目标和可见光细节表征。其次,设计聚焦双对抗鉴别器,以确定融合结果和源图像之间的相似分布。最后,选用公开数据集TNO和RoadScene进行实验并与其他9种具有代表性的图像融合方法进行对比,本文提出的方法不仅获得纹理细节更清晰、对比度更好的融合结果,而且客观度量指标优于其他先进方法。

关键词：红外可见光图像融合局部-全局三分支局部特征提取补偿注意力机制对抗学习聚焦双对抗鉴别器

来源：

维普期刊数据库

同方期刊数据库评论

在线全文

学校读者我要写书评

暂无评论

基于生成对抗网络的红外可见光图像融合

基于生成对抗网络的红外可见光图像融合

引用

作者：王玲静华北电力大学(北京)

学位级别：硕士

红外可见光图像融合指的是将红外图像的热辐射信息和可见光图像的纹理细节信息整合到一张图像,因其较强的互补性,目前已经在军事、工业等领域得到了广泛的应用。随着深度学习的发展,卷积神经网络被应用于图像融合中,目前卷积神经网络面... 详细信息

红外可见光图像融合指的是将红外图像的热辐射信息和可见光图像的纹理细节信息整合到一张图像,因其较强的互补性,目前已经在军事、工业等领域得到了广泛的应用。随着深度学习的发展,卷积神经网络被应用于图像融合中,目前卷积神经网络面临着两个主要问题,一是图像融合缺少真实图像的引导,进而导致生成的图像视觉效果不够好,融合质量较低;二是卷积神经网络的特征提取只能在卷积核尺寸内提取特征,这种特性会导致提取到的特征的局部依赖性较强,全局性比较差。并且随着输入图片分辨率的提高,这种问题会越来越严重,直接影响最终融合图像的质量。针对前述问题,本文主要研究了以下问题:(1)为了解决没有真实图像引导的问题,本文设计了基于生成对抗网络的图像融合方法,该方法无需真实图像的引导,由判决器和生成器构成,生成器的任务是用来生成一张“假”的融合图像来欺骗判决器,判决器用来判断输入是否来自于真实图像,生成器通过这种与判决器的对抗学习逐渐优化。此外,在红外可见光图像融合中,由于人们并不需要关注图像中所有的区域,需要关注的只是与任务相关的物体,但通常在特征融合时对所有的特征平等对待,导致真正需要的目标信息无法被突出显示,生成的图像视觉效果不好。而通道注意力模块能突出更有贡献的特征通道,空间注意力模块可以增强目标的显著性,因此本文提出一种融合算法,在生成器中加入了通道和空间注意力模块来提升融合图像的视觉感知效果。(2)针对卷积层提取特征时出现的局部依赖性较强的问题,本文在生成器中加入了改进后的自注意力模块并结合多尺度判决器设计了一种基于多尺度生成对抗网络的红外可见光图像融合算法。自注意力模块可以捕捉图像中长距离像素的相关性,使生成器能够提取到更为全局的特征进行融合。多尺度判决器的引入使判决器能更好的判断输入图像是否源自真实图像,并可以根据不同分辨率的输入来逐步地优化生成器进而使生成器生成更清晰的图像。经过实验证明,本文提出的融合算法在主观和客观评价上都有良好的融合性能。

关键词：红外可见光图像融合生成对抗网络注意力机制

来源：

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于红外及可见光图像融合的道路目标检测优化方法

引用

吉林大学学报(工学版) 2023年

作者：孙文财胡旭歌杨志发孙薇吉林大学交通学院长春汽车工业高等专科学校

为提高道路交通安全领域中的道路目标检测的精度，借鉴图像融合技术中多尺度特征图像融合思想以实现融合和GPNet的Ghost瓶颈模块建立思想以减小算法复杂度，建立了创新型红外和可见光融合及目标检测网络。网络分为选择性图像融合模块、... 详细信息

为提高道路交通安全领域中的道路目标检测的精度，借鉴图像融合技术中多尺度特征图像融合思想以实现融合和GPNet的Ghost瓶颈模块建立思想以减小算法复杂度，建立了创新型红外和可见光融合及目标检测网络。网络分为选择性图像融合模块、轻量化目标检测模块和融合质量及检测精度判别网络三个部分组成。在白天、夜间和特殊天气（雨、雾等）下，平均车速30-40km/h的城市工况下进行三组试验作为数据集，实验结果：平均梯度最高提升5.64881、交叉熵0.93668、边缘强度56.9457、信息熵0.925208781、互信息1.000548571、峰值信噪比3.053893252、Qab0.342882208、Qcb0.20898381以及均方误差降低0.08。轻量化目标检测网络输出的AP、 mAP和Recall均为最优水平，验证了红外和可见光技术的创新应用在道路障碍物检测方面的优势。

关键词：交通运输系统工程计算机视觉红外可见光图像融合 YOLOv5目标检测

来源：

同方期刊数据库评论

在线全文

同方期刊数据库

学校读者我要写书评

暂无评论

基于图像结构保持的红外与可见光图像融合算法研究

基于图像结构保持的红外与可见光图像融合算法研究

引用

作者：刘雪莹云南大学

学位级别：硕士

如今各种视觉传感技术应运而生,但是技术的专注性也决定了,为了得到契合人类视觉感官系统或者利于计算机识别应用的图像,需要统筹来自于不同成像技术的源图像的信息,这就是多源图像融合技术。本文的研究重点由红外可见光图像的融合算法... 详细信息

如今各种视觉传感技术应运而生,但是技术的专注性也决定了,为了得到契合人类视觉感官系统或者利于计算机识别应用的图像,需要统筹来自于不同成像技术的源图像的信息,这就是多源图像融合技术。本文的研究重点由红外可见光图像的融合算法展开。本文的主要内容和创新点概括如下:1.以人类的注意力机制作为引导,对视觉显著性检测进行了基础说明,同时列举了不同时期相关的算法。并且进行了两组小实验,加深对5种经典算法的认识,也为后文的研究做铺垫。2.在分析了红外和可见光图像的结构特征的基础上,针对红外图像中目标突出且单一的情况,提出一种基于显著性检测和结构保持的算法。首先在红外图像中提取显著性目标区域,归为前景区域,并通过系数绝对值取大的规则选择出最终的前景融合分量。其次,背景区域通过结构保持原则得到融合权重,并进一步得到背景融合分量。最后,结合前景融合分量和背景融合分量得到融合图像。与其他方法相比,本章提出的算法在视觉感受和评价指标上,均有一定的优势。3.针对红外图像中目标不够突出且分散的情况,提出一种基于图像梯度和改进的Haar小波变换的融合算法。首先通过两幅源图像中的梯度信息,利用系数绝对值取大的原则得到融合后的图像对应的结构特征。然后根据Haar小波分解系数与梯度的关系,将梯度信息转化为小波分解的输入。之后,利用小波逆变换得到初始融合图像。最后,利用自适应直方图优化,得到最终结果。与已有方法进行实验对比,从直观和客观两个角度,充分验证了本章所提算法的有效性。

关键词：红外可见光图像融合显著性结构保持图像梯度 Haar小波变换

来源：

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

欢迎您,

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

在线全文

在线全文

在线全文

在线全文

请选择保存的检索档案：

请选择收藏分类：

通借通还

欢迎您,

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

在线全文

在线全文

在线全文

在线全文

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：