基于多特征的红外与可见光图像融合 被引量：10

1

作者 刘明君 董增寿 《激光杂志》 北大核心 2019年第10期81-85,共5页

采用多尺度变换方法融合红外与可见光图像后,图像融合结果整体场景对比度低,细节与纹理不够清晰,提出基于多特征的红外与可见光图像融合方法。首先提取红外与可见光两种源图像中的边缘特征、相关信号强度比特征及平均梯度特征,通过决策... 采用多尺度变换方法融合红外与可见光图像后,图像融合结果整体场景对比度低,细节与纹理不够清晰,提出基于多特征的红外与可见光图像融合方法。首先提取红外与可见光两种源图像中的边缘特征、相关信号强度比特征及平均梯度特征,通过决策模块依据信号强度比特征和边缘特征确定多分辨率分析系数,然后基于该系数融合模块依据平均梯度特征,采用多分辨率奇异值分解方法融合图像低频子带,利用压缩感知方法融合高频子带背景区域,通过对背景区域高频、低频子带进行CS逆变换获取最终融合图像,最后仿真测试结果表明,该方法的行红外与可见光图像融合的标准差、平均梯度以及边缘保持度等指标都优于对比方法,融合后图像对比度和空间域内活跃度较好、图像细节较明显、图像内容更丰富。 展开更多

关键词 多特征 红外图像 可见光图像 图像融合 低频子带 高频子带

下载PDF 职称材料

一种实用的红外图像模拟生成方法 被引量：4

2

作者 桑农 陈艳菲 张天序 《华中科技大学学报（自然科学版）》 EI CAS CSCD 北大核心 2005年第5期55-57,共3页

提出了一种红外图像模拟方法,该方法以可见光图像作为红外背景模拟数据源,并采用Multigen,Vega等建模仿真软件模拟特定目标,通过红外目标与背景图像的叠加,并根据红外成像系统的三维噪声模型进行噪声处理,实现红外图像模拟.在红外背景... 提出了一种红外图像模拟方法,该方法以可见光图像作为红外背景模拟数据源,并采用Multigen,Vega等建模仿真软件模拟特定目标,通过红外目标与背景图像的叠加,并根据红外成像系统的三维噪声模型进行噪声处理,实现红外图像模拟.在红外背景模拟中,提出了以感兴趣区域分割为基础的区域划分方法,该分割方法较好地保留了区域细节,从而获得较精确的分割结果.最后给出的模拟实验结果表明本方法既能获得比较逼真的红外模拟图像又具有很强的实用性. 展开更多

关键词 可见光图像 感兴趣区域 红外图像 三维噪声

下载PDF 职称材料

基于结构信息的可见光和SAR图像两阶段配准方法

3

作者 贾蕾蕾 史林 +1 位作者 刘利民 史冬冬 《陆军工程大学学报》 2024年第4期26-34,共9页

针对可见光和合成孔径雷达(synthetic aperture radar,SAR)图像配准中存在的配准精度低和非线性辐射差异问题,提出了一种新的基于结构信息的可见光和SAR图像两阶段配准算法。在粗配准阶段,利用改进的最大自不相似性检测器(maximal self-... 针对可见光和合成孔径雷达(synthetic aperture radar,SAR)图像配准中存在的配准精度低和非线性辐射差异问题,提出了一种新的基于结构信息的可见光和SAR图像两阶段配准算法。在粗配准阶段,利用改进的最大自不相似性检测器(maximal self-dissimilarity detector,MSD)分别检测可见光和SAR图像中的特征点,基于图像局部自相似性提取图像结构信息构建最大自相似性索引图,利用最近邻与次近邻之比和快速抽样一致性识别正确匹配点对,估计变换模型。在精配准阶段,分别建立可见光和SAR图像的像素化结构特征表示,在可见光图像中以特征点为中心选取模板窗口,利用变换模型估计SAR图像中相对应的搜索区域,采用欧氏距离作为模板匹配的相似性度量,并利用快速傅里叶变换(fast Fourier transform,FFT)加速计算模板匹配过程。在9对真实可见光和SAR图像上的实验结果表明,该算法在可见光和SAR图像配准方面具有明显优势。较RIFT、HAPCG、OSS、LNIFT和ASS算法,正确匹配数(number of correct matches,NCM)分别提高了7.95、10.86、29.32、14.75和9.84倍,定位精度分别提高了0.44、0.42、0.35、0.41和0.40 pixel。 展开更多

关键词 可见光图像 SAR图像 两阶段配准 结构信息 局部自相似性 像素化结构特征表示

下载PDF 职称材料

基于可见光影像的黄河流域(郑州段)植被覆盖反演研究

4

作者 郭雪白 任朝栋 《河南科技》 2024年第13期87-92,共6页

【目的】寻求一种高效、低廉、准确的植被覆盖反演方法,为其他类似地区的植被覆盖监测提供参考。【方法】以黄河流域(郑州段)为研究区域,采用高分辨率可见光影像作为数据源,开展植被覆盖反演的关键技术研究。通过计算植被覆盖指数和各... 【目的】寻求一种高效、低廉、准确的植被覆盖反演方法,为其他类似地区的植被覆盖监测提供参考。【方法】以黄河流域(郑州段)为研究区域,采用高分辨率可见光影像作为数据源,开展植被覆盖反演的关键技术研究。通过计算植被覆盖指数和各种算法的准确度,确定最优的可见光影像植被覆盖反演算法。【结果】经过各类植被指数反演算法结果的比对,GLI植被指数算法总体准确度为96.59%,其他3种算法的准确度较低,分别为80.94%、83.3%和83.56%。证明GLI算法可被应用在类似的植被覆盖监测中。【结论】基于无人机可见光影像进行植被覆盖反演是一种低成本、效率高、易操作的方法。 展开更多

关键词 黄河流域 无人机 可见光影像 植被覆盖

下载PDF 职称材料

基于大数据分析的可见光图像融合质量评价研究

5

作者 翟广辉 李娟 《激光杂志》 CAS 北大核心 2024年第5期121-126,共6页

在复杂可见光图像下图像融合质量受到遮挡和重叠等因素影响,需要进行图像融合质量评价优化设计,提出基于大数据分析的可见光图像融合质量评价模型,采用相应图像块之间的视觉特征提取方法建立可见光图像的深度立体匹配模型,将不同光照强... 在复杂可见光图像下图像融合质量受到遮挡和重叠等因素影响,需要进行图像融合质量评价优化设计,提出基于大数据分析的可见光图像融合质量评价模型,采用相应图像块之间的视觉特征提取方法建立可见光图像的深度立体匹配模型,将不同光照强下采集的图像像素值显示映射到嵌入特征空间中,完成预处理,构建可见光图像的动态像素大数据融合模型,通过端到端的视差融合估计实现对可见光图像的动态融合,采用超分辨重建方法获得真实配对图像,分析SR结果与LR图像中的相似内容,以特征级别的图像分布域反映可见光图像融合质量评价,实现可见光图像融合质量评价。仿真结果表明,采用该方法进行可见图像融合的匹配性能较好,图像的对比度、饱和度高,提高了可见光的成像质量,耗时为0.012 s,平均迭代次数为1.569,并且均方误差仅为1.071,总误差仅为4.646,该方法有效提高了图像融合质量的同时,提高了评估效果。 展开更多

关键词 大数据分析 可见光图像 图像融合 质量评价 视觉特征

下载PDF 职称材料

融合特征的红外与可见光异源图像匹配

6

作者 王智军 王鹏 《激光杂志》 CAS 北大核心 2024年第5期127-132,共6页

当前红外和可见光图像配准未考虑灰度、空间的位置情况,匹配结果的平均归一化修正检索秩(A_(r))较高。因此,提出融合特征的红外与可见光异源图像匹配算法。分析待匹配图像的中矩形区域灰度差值特征,绘制Haar特征密度分布图,并基于此实... 当前红外和可见光图像配准未考虑灰度、空间的位置情况,匹配结果的平均归一化修正检索秩(A_(r))较高。因此,提出融合特征的红外与可见光异源图像匹配算法。分析待匹配图像的中矩形区域灰度差值特征,绘制Haar特征密度分布图,并基于此实现图像滤波。通过离散变换(K-L)提取滤波后图像灰度特征、像素密度特征和纹理特征,完成多图像特征的压缩与融合。基于融合特征,计算待匹配红外图像与可见光图像的格贴近度,得到异源图像匹配结果。实验结果表明:所提方法应用后,异源图像匹配结果的A_(r)平均值仅为0.35,更好地满足了图像匹配要求。 展开更多

关键词 红外图像 可见光图像 纹理特征 特征融合 格贴近度 图像匹配

下载PDF 职称材料

深度学习与图像融合的行人检测算法研究

7

作者 姜柏军 钟明霞 林昊昀 《激光与红外》 CAS CSCD 北大核心 2024年第2期302-306,共5页

为解决智能辅助驾驶技术中可见光摄像机受光照和气候影响而导致行人目标识别困难的问题。通过研究图像融合技术,结合深度卷积神经网络,实现并改进了一种道路行人目标检测算法。方法是利用多源传感器图像融合技术,采用可见光相机与红外... 为解决智能辅助驾驶技术中可见光摄像机受光照和气候影响而导致行人目标识别困难的问题。通过研究图像融合技术,结合深度卷积神经网络,实现并改进了一种道路行人目标检测算法。方法是利用多源传感器图像融合技术,采用可见光相机与红外热成像相机融合的策略,以Faster RCNN算法为基础,从改进网络结构、特征融合、优化模型训练等方面展开研究,对复杂环境下的行人检测与定位跟踪展开研究,提出一种基于图像融合技术和改进的深度卷积神经网络的道路行人目标检测算法。实验结果表明,该算法对复杂气候环境下行人目标检测提高了检测效率和准确率,增加了智能辅助驾驶汽车的安全性。 展开更多

关键词 红外热成像 可见光图像 Faster RCNN 深度卷积神经网络 行人目标检测

下载PDF 职称材料

视觉传感器与激光测距雷达空间对准方法 被引量：6

8

作者 付梦印 刘明阳 《红外与激光工程》 EI CSCD 北大核心 2009年第1期74-78,共5页

利用激光测距雷达与视觉传感器进行数据融合,可以解决因光线问题造成的可见光图像缺失、虚警率高的问题。而两者的空间对准又是数据融合的前提。针对地面自主移动平台上安装的可见光视觉传感器与激光测距雷达的特性,将激光测距雷达数据... 利用激光测距雷达与视觉传感器进行数据融合,可以解决因光线问题造成的可见光图像缺失、虚警率高的问题。而两者的空间对准又是数据融合的前提。针对地面自主移动平台上安装的可见光视觉传感器与激光测距雷达的特性,将激光测距雷达数据转化为图像,利用标定模板提供的空间约束求解,对可见光与激光距离图像的空间对准问题进行求解。最后,验证实验结果并进行误差分析。实验结果表明,该方法能够有效地对可见光与激光距离图像进行空间对准,实现可见光图像与激光测距雷达数据的关联。 展开更多

关键词 空间对准 激光测距雷达 可见光图像 深度图

下载PDF 职称材料

电力行业无人机巡检可见光图像与激光点云数据配准方法研究

9

作者 张少杰 赵李强 +5 位作者 周静波 陈国坤 焦宗寒 杨伟 王欣 刘荣海 《云南电力技术》 2024年第2期70-73,80,共5页

当前,电力行业为了提高输变电专业日常巡检的密度和精度,同时大幅降低输变电设备运维的人力成本,无人机技术被广泛引入到日常巡检业务中,通过无人机机载可见光成像设备和激光雷达设备获得了大量输变电设备可见光图像和激光点云数据。针... 当前,电力行业为了提高输变电专业日常巡检的密度和精度,同时大幅降低输变电设备运维的人力成本,无人机技术被广泛引入到日常巡检业务中,通过无人机机载可见光成像设备和激光雷达设备获得了大量输变电设备可见光图像和激光点云数据。针对二维可见光图像数据深度信息丢失和三维点云数据智能识别障碍的问题,本文提出了一种可见光图像数据与激光点云数据的配准方法,即通过人工选取部分特征点的三维点云和二维像素点对数据,通过奇异值分解(SVD)方法求解出了关联三维世界坐标与二维像素坐标的参数矩阵T,验证结果表明经过上述矩阵T投影变换的二维特征点与其对应三维特征点吻合度较高,具备较好的配准精确度,基于此配准关系可实现输变电巡检点云数据与可见光数据的融合应用。 展开更多

关键词 无人机巡检 计算机视觉 可见光图像 激光点云 数据配准

下载PDF 职称材料

基于NSCT变换和压缩感知的图像融合 被引量：5

10

作者 吴延海 张烨 马孟新 《西安科技大学学报》 CAS 北大核心 2015年第4期480-485,共6页

针对NSCT变换分解得到的各个方向子带稀疏度不同的问题,文中提出了1种基于改进的CS_NSCT图像融合方法。首先对待融合图像进行NSCT分解,接着对得到的高频分量采用自适应的压缩感知方法进行压缩,并在压缩域融合后重构;对低频分量采用DCT... 针对NSCT变换分解得到的各个方向子带稀疏度不同的问题,文中提出了1种基于改进的CS_NSCT图像融合方法。首先对待融合图像进行NSCT分解,接着对得到的高频分量采用自适应的压缩感知方法进行压缩,并在压缩域融合后重构;对低频分量采用DCT能量准则融合,最后对融合后的高低频分量进行NSCT重构。仿真实验结果表明,文中方法在减少了数据量的同时有效提高了图像的熵值、标准偏差、平均梯度等指标。 展开更多

关键词 图像融合 压缩感知 非下采样CONTOURLET变换 可见光 红外

下载PDF 职称材料

可见光监测与CT检测融合驱动的高温合金SLM成形孔隙演变研究

11

作者 周圣智 涂先猛 +7 位作者 计效园 陈嘉龙 杨欢庆 王泽明 彭东剑 李宁 周建新 高亮 《铸造技术》 CAS 2023年第7期640-648,共9页

孔隙缺陷对SLM成形件的性能与可靠性有重大影响,现有孔隙演变研究主要从成形过程监测与成形结果分析两方面分离进行。本文提出一种成形过程监测与成形结果检测融合驱动的SLM孔隙随层厚演变研究新方法,获取GH4169合金SLM成形凝固的可见... 孔隙缺陷对SLM成形件的性能与可靠性有重大影响,现有孔隙演变研究主要从成形过程监测与成形结果分析两方面分离进行。本文提出一种成形过程监测与成形结果检测融合驱动的SLM孔隙随层厚演变研究新方法,获取GH4169合金SLM成形凝固的可见光监测图像与SLM成形件的CT检测图像,选取特定区域孔隙并提取特征参数,表征并分析两种图像中孔隙特征参数随层厚的变化。结果表明,CT图像孔隙特征参数随层厚变化较可见光图像有滞后;孔隙形成的前半部分,第N+1层的成形对第N(或及以下)层孔隙具有缩小作用,后半部分具有扩大作用;第N+1层的成形具有减小第N(或及以下)层孔隙圆度的作用。结论有待进一步验证,但为SLM成形缺陷随层厚演变的研究提供了一种新思路,后续将继续深入研究。 展开更多

关键词 SLM GH4169 孔隙演变 可见光图像 CT图像

下载PDF 职称材料

2022年内蒙古无人机马铃薯图像数据集

12

作者 胡天赐 王瑞利 +4 位作者 蒋呈祥 白涛 胡林 王晓丽 郭雷风 《农业大数据学报》 2023年第1期40-45,共6页

马铃薯是世界第四大粮食作物,规模化种植是其高产量的基础性保障。随着数字农业的发展,马铃薯的规模化种植方式也日益趋向自动化与智能化。无人机是作物植保和生长监测的重要工具,无人机光谱数据在作物识别、作物生长状况分析等方面发... 马铃薯是世界第四大粮食作物,规模化种植是其高产量的基础性保障。随着数字农业的发展,马铃薯的规模化种植方式也日益趋向自动化与智能化。无人机是作物植保和生长监测的重要工具,无人机光谱数据在作物识别、作物生长状况分析等方面发挥重要的作用。为探究光谱数据及图像数据在马铃薯生长中所发挥的作用,文章利用无人机遥感获取不同高度的多光谱影像,并对地面的马铃薯叶片数据进行采集,经过人工检查和整理构建了论文数据集。数据采集地点位于内蒙古呼伦贝尔两块成熟期种薯试验田,采集时间为2022年8月13日、16日和18日,期间共完成了3次不同空间分辨率的光谱数据及图像数据采集。本文数据集的光谱数据完整,叶片数据清晰,可为马铃薯作物识别、种植面积估测以及成熟期期间不同日期的马铃薯相关植被指数变化等研究提供数据支撑。 展开更多

关键词 无人机 马铃薯 多光谱 可见光图像 内蒙古

下载PDF 职称材料

单光子探测三维点云与可见光图像融合处理算法研究 被引量：3

13

作者 张飞飞 彭雷 袁韬 《应用光学》 CAS CSCD 北大核心 2021年第6期1034-1039,共6页

为了提升光电系统对于目标的探测识别能力,实现单光子探测三维点云数据和二维可见光图像的融合处理,提出了单光子探测成像系统的融合处理算法,采用直接线性变换方法并利用同名特征点的选取和间接平差算法解决了融合处理过程中的参数标... 为了提升光电系统对于目标的探测识别能力,实现单光子探测三维点云数据和二维可见光图像的融合处理,提出了单光子探测成像系统的融合处理算法,采用直接线性变换方法并利用同名特征点的选取和间接平差算法解决了融合处理过程中的参数标定问题。通过实验数据进行融合处理算法验证,实现了分辨率1024×768像素单光子探测三维点云和二维可见光图像的像素级融合处理。实验结果表明,提出的融合处理算法能够有效实现三维、二维图像的融合。 展开更多

关键词 单光子 三维点云 融合 可见光图像

下载PDF 职称材料

基于无人机可见光图像的夏季玉米植被覆盖度提取方法 被引量：37

14

作者 赵静 杨焕波 +3 位作者 兰玉彬 鲁力群 贾鹏 李志铭 《农业机械学报》 EI CAS CSCD 北大核心 2019年第5期232-240,共9页

为准确快速获取夏季玉米四叶期、拔节期、抽穗期和花粒期的植被覆盖度信息,利用无人机获取玉米田间可见光图像,对图像可见光波段提取的多种植被指数进行分析和比较,选择差异植被指数(Visible-band difference vegetation index,VDVI)、... 为准确快速获取夏季玉米四叶期、拔节期、抽穗期和花粒期的植被覆盖度信息,利用无人机获取玉米田间可见光图像,对图像可见光波段提取的多种植被指数进行分析和比较,选择差异植被指数(Visible-band difference vegetation index,VDVI)、过绿指数(Excess green,EXG)和归一化绿蓝差异指数(Normalized green-blue difference index,NGBDI),结合监督分类提取了玉米4个时期的植被覆盖度信息。通过对试验田4个阶段的单幅图像监督分类处理,将其目标物分为土壤和玉米植被两类;分别统计监督分类后图像中土壤和玉米的VDVI像元直方图,将两者的像元直方图交点作为植被覆盖度提取阈值,同理获得EXG和NGBDI对应的玉米植被覆盖度提取阈值;利用获取的玉米植被3种覆盖度提取阈值,对玉米4个时期的植被覆盖度进行提取,并对提取精度进行了验证。结果表明,VDVI对应4个生长时期的植被覆盖度提取误差分别为1. 21%、4. 88%、2. 31%和3. 61%; EXG对应的植被覆盖度提取误差分别为1. 38%、1. 25%、0. 89%和0. 33%; NGBDI提取误差为1. 61%、3. 31%、1. 99%和3. 25%,EXG在夏季玉米4个生长时期的植被覆盖度提取效果最好。将玉米4个生长时期单幅图像确定的阈值作为固定阈值,对剔除确定阈值的单幅图像的试验田全景图像进行植被覆盖度提取,并对提取效果进行验证。结果表明,采用监督分类与可见光植被指数统计直方图相结合确定阈值的方法提取玉米植被覆盖度效果较好。 展开更多

关键词 夏季玉米 无人机可见光图像 植被覆盖度 植被指数 阈值提取

下载PDF 职称材料

基于卷积神经网络的红外图像融合算法 被引量：17

15

作者 陈清江 李毅 柴昱洲 《激光与红外》 CAS CSCD 北大核心 2019年第1期123-128,共6页

红外图像与可见光图像融合的目的是为人类观察或其他计算机视觉任务生成信息更加丰富的图像。本文针对深度学习近年来在计算机视觉领域取得的巨大成功,提出一种基于卷积神经网络的红外与可见光图像融合算法。首先,使用引导滤波和高斯滤... 红外图像与可见光图像融合的目的是为人类观察或其他计算机视觉任务生成信息更加丰富的图像。本文针对深度学习近年来在计算机视觉领域取得的巨大成功,提出一种基于卷积神经网络的红外与可见光图像融合算法。首先,使用引导滤波和高斯滤波器组成的尺度感知边缘保护滤波器对输入的源图像进行多尺度分解,基础层利用像素强度分布的加权平均融合规则进行融合,细节层借助卷积神经网络对空间细节进行提取融合。实验结果表明,本文算法可以较好的将特定尺度信息进行保存,并减小滤波对边缘细节带来的光晕影响,融合后图像噪声较少,细节呈现的更加自然,并且适合人类视觉感知。 展开更多

关键词 图像融合 红外与可见光图像 卷积神经网络 多尺度分解

下载PDF 职称材料

基于可见光波段无人机遥感的火龙果精准识别方法 被引量：9

16

作者 朱孟 周忠发 +1 位作者 蒋翼 黄登红 《激光与光电子学进展》 CSCD 北大核心 2020年第14期351-360,共10页

快速、高效地区分并剔除火龙果地块间的杂草是提高火龙果单株提取精度的关键所在。通过四旋翼无人机平台获取高空间分辨率可见光波段的影像,分析火龙果植株和杂草R、G、B通道的光谱特征,根据其影像像元亮度值(DN值)构建相近颜色差异植... 快速、高效地区分并剔除火龙果地块间的杂草是提高火龙果单株提取精度的关键所在。通过四旋翼无人机平台获取高空间分辨率可见光波段的影像,分析火龙果植株和杂草R、G、B通道的光谱特征,根据其影像像元亮度值(DN值)构建相近颜色差异植被指数(CCVI),通过最大类方差(OTSU)阈值分割、Majority/Minority分析和聚类空洞填补,并与VDVI、EXG、NGRDI等可见光波段指数作对比研究。结果表明:1)对于杂草覆盖度较高甚至杂草全覆盖火龙果的地块,CCVI提取效果较好,而其余3种指数在杂草与植株共生的地块中分类精度较低;2)3个研究感兴趣区域(ROI)内样本的提取总体精度为94.60%,Kappa系数为0.9417,测试样本的提取总体精度和Kappa系数分别为94.33%、0.9328,经验证,对于不同区域内生活环境相似的植株的提取精度趋近一致。结果证实:CCVI能从杂草中辨别火龙果植株并提取单株,提取效果较好,该方法可与VDVI、EXG、NGRDI等指数互补应用。 展开更多

关键词 遥感 无人机可见光影像 CCVI 火龙果识别 杂草辨别 阈值分割 聚类分析

原文传递

一种红外可见光图像融合及其目标识别方法 被引量：7

17

作者 王宁 周铭 杜庆磊 《空军预警学院学报》 2019年第5期328-332,共5页

为结合红外图像和可见光图像对目标检测识别的优点,提出了一种红外可见光图像融合及其目标识别方法.该方法根据数学形态学算法获得局部感兴趣区域,减少图像特征点生成范围,提高效率;通过使用基于多模态图像尺度与部分灰度不变图像特征... 为结合红外图像和可见光图像对目标检测识别的优点,提出了一种红外可见光图像融合及其目标识别方法.该方法根据数学形态学算法获得局部感兴趣区域,减少图像特征点生成范围,提高效率;通过使用基于多模态图像尺度与部分灰度不变图像特征算法建立合适的特征点定位和描述;最终根据局部不变性匹配原则,实现图像误匹配消除,得到配准关系.实验结果表明,本文方法能实现融合图像多目标的检测识别,其精度好,有一定的应用前景. 展开更多

关键词 红外可见光图像 图像融合 目标识别 Top-hat算法 配准关系

下载PDF 职称材料

基于改进YOLOv5s的图像融合交通检测方法

18

作者 江晟 王博文 许文娟 《长春理工大学学报（自然科学版）》 2024年第2期66-74,共9页

针对复杂交通环境下YOLOv5s模型识别精度低、网络模型参数量大的问题,提出一种基于红外图像和可见光图像特征融合的行人与车辆目标检测算法。基于YOLOv5s算法进行改进,首先,使用渐进式图像融合网络生成可见光与红外图像数据集;其次,在... 针对复杂交通环境下YOLOv5s模型识别精度低、网络模型参数量大的问题,提出一种基于红外图像和可见光图像特征融合的行人与车辆目标检测算法。基于YOLOv5s算法进行改进,首先,使用渐进式图像融合网络生成可见光与红外图像数据集;其次,在特征融合部分采用GSConv卷积替换原始卷积,减少模型参数量和计算量,并且引入CA位置注意力机制,使网络更加关注位置信息;采用EIOU-Loss损失函数替换原始损失函数,加快收敛速度提高回归精度;最后,在M3FD数据集上对行人与车辆进行目标检测识别实验。实验结果表明,对于复杂背景的红外条件下的交通检测,改进后的YOLOv5s相较于原始网络的mAP提升了11.6%,模型大小减少了4.20%,参数量减少了8.05%,检测速度提升了9.09%。 展开更多

关键词 红外与可见光图像 目标检测 图像融合 注意力机制

下载PDF 职称材料

基于GAN轻量化改进的红外与可见光图像融合算法

19

作者 鲁晓涵 李洋 +2 位作者 邰昱博 徐宇 贾耀东 《电光与控制》 CSCD 北大核心 2024年第8期58-62,85,共6页

普通神经网络难以生成符合人眼视觉的红外与可见光融合图像,且网络模型复杂、占用内存过大。本文改进现有的生成对抗网络(GAN)框架:首先,在生成器中融入深度卷积和逐点卷积,设计小卷积核的卷积网络以减少网络参数;其次,对源图像进行掩... 普通神经网络难以生成符合人眼视觉的红外与可见光融合图像,且网络模型复杂、占用内存过大。本文改进现有的生成对抗网络(GAN)框架:首先,在生成器中融入深度卷积和逐点卷积,设计小卷积核的卷积网络以减少网络参数;其次,对源图像进行掩膜处理以减少提取特征过程中源图像信息的丢失;然后将处理后的图像和生成器得到的融合图像共同输入到鉴别器中,以增强网络对可见光图像保留源图像信息的能力;最后,在性能评价阶段将损失函数设置为梯度损失、对抗损失和内容损失函数,以约束融合图像,使其包含更多的可见光图像的背景信息以及红外图像的目标信息。在TNO image fusion dataset上进行了仿真实验,结果表明所提算法在降低网络复杂度、减少运算参数的同时可得到细节丰富、目标明确的融合图像。 展开更多

关键词 图像融合 红外与可见光图像 生成对抗网络 深度可分离卷积网络

下载PDF 职称材料

基于GAN改进的红外光与可见光图像融合算法研究

20

作者 鲁晓涵 李洋 +2 位作者 贾耀东 邰昱博 徐宇 《电光与控制》 CSCD 北大核心 2024年第6期42-46,73,共6页

针对夜晚户外场景下,传统的单一鉴别器生成对抗网络(GAN)容易忽略红外光的亮度信息和边缘信息的问题,提出一种基于注意力机制与双鉴别器的红外光与可见光图像融合算法。首先,为了有针对性地获得红外光图像的目标信息和可见光图像的背景... 针对夜晚户外场景下,传统的单一鉴别器生成对抗网络(GAN)容易忽略红外光的亮度信息和边缘信息的问题,提出一种基于注意力机制与双鉴别器的红外光与可见光图像融合算法。首先,为了有针对性地获得红外光图像的目标信息和可见光图像的背景纹理信息,在生成器网络中引入通道注意力机制;其次,使用双鉴别器的生成对抗网络,并设计一种新的鉴别器输入,在提高训练稳定性的同时更好地保留源图像信息;最后,损失函数设置为对抗损失、结构相似性损失和梯度损失,以约束鉴别器使其生成细节信息丰富的融合图像。在TNO数据集上的实验结果表明,所提算法得到的融合图像梯度变化更明显、边缘更加清晰,更符合人眼视觉效果。 展开更多

关键词 图像融合 红外光与可见光图像 生成对抗网络 注意力机制

下载PDF 职称材料