期刊文献+
共找到208篇文章
< 1 2 11 >
每页显示 20 50 100
基于张量表示的高光谱图像目标检测 被引量:19
1
作者 张小荣 胡炳樑 +1 位作者 潘志斌 郑茜 《光学精密工程》 EI CAS CSCD 北大核心 2019年第2期488-498,共11页
高光谱图像目标检测作为一个研究热点在军事和民用方面的应用越来越广泛。为了能同时利用高光谱图像数据的空谱信息,本文提出一种新的基于张量表示的高光谱图像目标检测算法。算法使用CP(Canonical Polyadic)张量分解技术和张量块分解(B... 高光谱图像目标检测作为一个研究热点在军事和民用方面的应用越来越广泛。为了能同时利用高光谱图像数据的空谱信息,本文提出一种新的基于张量表示的高光谱图像目标检测算法。算法使用CP(Canonical Polyadic)张量分解技术和张量块分解(Block Term Decomposition,BTD)分别对高光谱数据进行盲源分析,提取了有效的局部图像块空谱特征,建立了一个基于稀疏表示和协作表示的检测模型,针对多种类型背景复杂的场景数据进行实验,并与当前流行的目标检测算法进行比较。从可视化检测结果来看,本文算法在复杂背景和强噪声环境下,有效提取了空谱特征,对背景具有较好的抑制能力,检测的目标显著。此外,本文从接收机操作曲线(Receiver Operating Characteristic Curve,ROC)和ROC曲线下面积(Area Under Curve,AUC)等定量指标分析算法性能。以较为流行的Sandiego图像为例,在10%的虚警率下,本文算法取得90%的检测精度,AUC大于0.95。本文算法相较几种流行算法而言具有较高的检测精度,更强的鲁棒性。 展开更多
关键词 目标检测 高光谱图像 张量表示 特征提取 协作表示
下载PDF
基于PCA_LDA和协同表示分类的人脸识别算法 被引量:14
2
作者 聂栋栋 贺悦悦 马勤勇 《燕山大学学报》 CAS 北大核心 2019年第2期176-181,共6页
人脸识别是近年来模式识别领域的热门课题,其中特征提取和分类器选择是人脸识别的关键步骤。主成分分析和线性判别分析是特征提取的主要方法之一,但主成分分析忽略了数据的类别信息,线性判别分析类内散度矩阵奇异,导致投影矩阵无法直接... 人脸识别是近年来模式识别领域的热门课题,其中特征提取和分类器选择是人脸识别的关键步骤。主成分分析和线性判别分析是特征提取的主要方法之一,但主成分分析忽略了数据的类别信息,线性判别分析类内散度矩阵奇异,导致投影矩阵无法直接得出。为解决以上问题,本文提出基于PCA_LDA和协同表示人脸识别算法,该算法结合主成分分析和线性判别分析,将人脸的特征信息压缩到一个更小的子空间内,再采用协同表示分类算法对测试图像进行识别。在ORL人脸库、FERET人脸库和YALE人脸库上的大量实验证实,本文算法能精确地提取到高维图像信息的主要特征,在保留特征信息的同时,大大减小了计算的复杂度。而且相比其它几种典型算法,本文算法具有更高的识别率和更健壮的抗干扰性能。 展开更多
关键词 人脸识别 主成分分析 线性判别分析 协同表示分类
下载PDF
基于Shearlet变换和均匀局部二值模式特征的协作表示人脸识别算法 被引量:11
3
作者 谢佩 吴小俊 《计算机应用》 CSCD 北大核心 2015年第7期2056-2061,2092,共7页
为了获得人脸图像中更丰富的纹理特征以提高人脸识别率,提出了一种基于Shearlet变换和均匀局部二值模式(ULBP)算子提取特征(Shearlet_ULBP特征)的协作表示方法——Shearlet_ULBP CRC用于人脸识别。首先,人脸图像通过Shearlet变换分解,... 为了获得人脸图像中更丰富的纹理特征以提高人脸识别率,提出了一种基于Shearlet变换和均匀局部二值模式(ULBP)算子提取特征(Shearlet_ULBP特征)的协作表示方法——Shearlet_ULBP CRC用于人脸识别。首先,人脸图像通过Shearlet变换分解,得到多尺度多方向的幅值域图谱,再经过简单的平均融合,获得融合后的幅值域图谱;然后,通过ULBP算子结合分块的方法获得该Shearlet变换后融合图像的直方图特征;最后,结合协作表示的方法来分类所提取到的特征。该方法可以提取到图像更丰富的边缘以及纹理信息,在ORL、Extended Yale B和AR人脸数据库上进行测试,在图像无遮挡的情况下识别率都达到了99%以上,在有遮挡情况下也都达到了91%以上的识别率。实验结果表明,所提方法不仅对于光照、姿态和表情变化具备较强的鲁棒性,同时能在一定程度上处理人脸图像中存在遮挡的情形。 展开更多
关键词 SHEARLET变换 均匀局部二值模式算子 人脸识别 图像融合 协作表示
下载PDF
基于Gabor特征与协同表示的人脸识别算法 被引量:10
4
作者 张宏星 邹刚 +1 位作者 赵键 李志勇 《计算机工程与设计》 CSCD 北大核心 2014年第2期666-670,676,共6页
基于稀疏表示的分类识别算法(SRC)在进行人脸识别处理时需要求解基于l1范数最小化问题,导致SRC方法的计算复杂度较高。基于协同表示和规则最小二乘的分类识别方法 (CRC-RLS),提出SRC算法对于分类的有效性不是取决于基于l1范数的稀疏性,... 基于稀疏表示的分类识别算法(SRC)在进行人脸识别处理时需要求解基于l1范数最小化问题,导致SRC方法的计算复杂度较高。基于协同表示和规则最小二乘的分类识别方法 (CRC-RLS),提出SRC算法对于分类的有效性不是取决于基于l1范数的稀疏性,而是由其内在的协同表示性所决定的,因此将基于l1范数的稀疏性约束条件简化为最小二乘约束问题,算法复杂度得到大幅降低。由于SRC和CRC-RLS算法均采用特征脸作为分类识别的特征矢量,导致识别鲁棒性不强。以人脸图像的规则化扩展Gabor特征作为特征矢量,结合协同表示的方法,提出了一种新的基于Gabor特征与协同表示的人脸识别算法(Gabor-CRC)。实验结果表明,该方法对于人脸图像的光照、表情和姿态等变化具备较强鲁棒性,算法运行速度较快。 展开更多
关键词 人脸识别 稀疏表示 GABOR特征 协同表示 分类算法
下载PDF
一种鲁棒协作表示的人脸识别算法 被引量:10
5
作者 林国军 解梅 《计算机应用研究》 CSCD 北大核心 2014年第8期2520-2522,2531,共4页
针对鲁棒稀疏编码(RSC)计算复杂度大的问题,利用协作表示适合于人脸识别的优点,提出了一种鲁棒协作表示(RCR)的人脸识别算法。首先,认为编码余项和编码系数是分别独立同分布的,RCR寻求稀疏编码问题的最大似然估计解;然后,利用迭代重加... 针对鲁棒稀疏编码(RSC)计算复杂度大的问题,利用协作表示适合于人脸识别的优点,提出了一种鲁棒协作表示(RCR)的人脸识别算法。首先,认为编码余项和编码系数是分别独立同分布的,RCR寻求稀疏编码问题的最大似然估计解;然后,利用迭代重加权协作表示算法来解决RCR模型;最后,对测试图像进行分类和识别。实验结果表明,与其他算法相比,RCR在大幅降低计算复杂度的同时保证了识别率。RCR是一种有效的人脸识别算法,对遮挡的人脸识别具有很强的鲁棒性。 展开更多
关键词 人脸识别 稀疏表示 协作表示 最大似然估计 遮挡
下载PDF
基于PCA与协同表示的高光谱图像分类研究 被引量:10
6
作者 韩嫚莉 侯卫民 +2 位作者 孙靖国 王明 梅少辉 《电子科技大学学报》 EI CAS CSCD 北大核心 2019年第1期117-121,共5页
在基于协同表示(CR)的高光谱图像分类问题中,通常直接选用训练样本构建各类字典,但各类字典内训练样本基元间的相关性往往会降低协同表示分类性能。为此,该文提出采用主成分分析(PCA)对各类训练样本进行去相关处理以构建字典,降低了训... 在基于协同表示(CR)的高光谱图像分类问题中,通常直接选用训练样本构建各类字典,但各类字典内训练样本基元间的相关性往往会降低协同表示分类性能。为此,该文提出采用主成分分析(PCA)对各类训练样本进行去相关处理以构建字典,降低了训练样本间的相关性对分类结果的影响,可有效提高协同表示分类的有效性。高光谱真实数据分类实验结果表明,该算法可有效提高传统协同表示分类的正确率。 展开更多
关键词 分类 协同表示 高光谱 主成分分析
下载PDF
基于Gabor特征核协作表达的三维人脸识别 被引量:9
7
作者 詹曙 张启祥 +1 位作者 蒋建国 Shigeru ANDO 《光子学报》 EI CAS CSCD 北大核心 2013年第12期1448-1453,共6页
为了克服三维人脸识别中光照、表情、姿态等变化带来的识别困难,本文提出了基于Gabor特征的核协作表达三维人脸识别算法.协作表达分类算法利用相似人脸数据共同协作表示测试人脸,通过2范数求解稀疏系数,根据重构误差将测试人脸正确归类... 为了克服三维人脸识别中光照、表情、姿态等变化带来的识别困难,本文提出了基于Gabor特征的核协作表达三维人脸识别算法.协作表达分类算法利用相似人脸数据共同协作表示测试人脸,通过2范数求解稀疏系数,根据重构误差将测试人脸正确归类.该方法通过Gabor滤波器提取三维人脸深度图的40个不同尺度和方向的Gabor特征,然后选择合适核函数将其映射到高维核空间进行非线性降维和特征选取,最后结合协作表达分类算法完成三维人脸的识别.Kinect人脸库和Texas三维人脸库实验表明,该方法能在较少训练样本的情况下取得足够好的识别效果. 展开更多
关键词 稀疏表达 协作表达 GABOR特征 核方法 特征选择 三维人脸深度图 人脸识别
下载PDF
基于判别低秩矩阵恢复和协同表示的遮挡人脸识别 被引量:9
8
作者 孙雨浩 陶洋 胡昊 《计算机工程与科学》 CSCD 北大核心 2020年第12期2199-2207,共9页
针对训练样本和测试样本均受到严重的噪声污染的人脸识别问题,传统的子空间学习方法和经典的基于稀疏表示的分类(SRC)方法的识别性能都将急剧下降。另外,基于稀疏表示的方法也存在算法复杂度较高的问题。为了在一定程度上缓解上述问题,... 针对训练样本和测试样本均受到严重的噪声污染的人脸识别问题,传统的子空间学习方法和经典的基于稀疏表示的分类(SRC)方法的识别性能都将急剧下降。另外,基于稀疏表示的方法也存在算法复杂度较高的问题。为了在一定程度上缓解上述问题,提出一种基于判别低秩矩阵恢复和协同表示的遮挡人脸识别方法。首先,低秩矩阵恢复可以有效地从被污损的训练样本中恢复出干净的、具备低秩结构的训练样本,而结构非相关性约束的引入可以有效提高恢复数据的鉴别能力。然后,通过学习原始污损数据与恢复出的低秩数据之间的低秩投影矩阵,将受污损的测试样本投影到相应的低维子空间,以修正污损测试样本。最后,利用协同表示的分类方法(CRC)对修正后的测试样本进行分类,获取最终的识别结果。在Extended Yale B和AR数据库上的实验结果表明,本文方法对遮挡人脸识别具有更好的识别性能。 展开更多
关键词 人脸识别 判别低秩矩阵恢复 低秩投影矩阵 协同表示
下载PDF
基于一阶和二阶信息图像表示的人脸识别 被引量:8
9
作者 刘峰 孟凡荣 梁志贞 《计算机应用研究》 CSCD 北大核心 2017年第2期603-606,615,共5页
针对人脸训练集中的样本存在不同程度的变换(比如平移、旋转、缩放等),导致传统的基于稀疏表示的分类算法(SRC)、基于协同表示的分类算法(CRC_RLS)在分类时精度降低,提出了一种基于一阶和二阶信息的图像分类表示算法(SRC_FSD)。这种方... 针对人脸训练集中的样本存在不同程度的变换(比如平移、旋转、缩放等),导致传统的基于稀疏表示的分类算法(SRC)、基于协同表示的分类算法(CRC_RLS)在分类时精度降低,提出了一种基于一阶和二阶信息的图像分类表示算法(SRC_FSD)。这种方法通过测试图像的像素值是由对应训练图像的邻近像素值图像的重建而成的,利用泰勒公式,考虑了一阶和二阶信息,目的是消除变换对图像造成的影响,从而提高测试样本的分类精度。最后在extended Yale B和AR人脸数据集上进行了不同维度下样本的对比实验,实验结果表明该方法具有很好的鲁棒性,有效地提高了人脸识别率。 展开更多
关键词 稀疏表示 协同表示 人脸识别 一阶和二阶信息
下载PDF
基于多模态融合与多层注意力的视频内容文本表述研究 被引量:7
10
作者 赵宏 郭岚 +1 位作者 陈志文 郑厚泽 《计算机工程》 CAS CSCD 北大核心 2022年第10期45-54,共10页
针对现有视频内容文本表述模型存在生成的文本表述单一、准确率不高等问题,提出一种融合帧级图像及音频信息的视频内容文本表述模型。基于自注意力机制设计单模态嵌入层网络结构,并将其嵌入单模态特征中学习单模态特征参数。采用联合表... 针对现有视频内容文本表述模型存在生成的文本表述单一、准确率不高等问题,提出一种融合帧级图像及音频信息的视频内容文本表述模型。基于自注意力机制设计单模态嵌入层网络结构,并将其嵌入单模态特征中学习单模态特征参数。采用联合表示、协作表示两种方法对单模态嵌入层输出的高维特征向量进行双模态特征融合,使模型能关注视频中不同目标间的交互关系,从而生成更加丰富、准确的视频文本表述。使用大规模数据集对模型进行预训练,并提取视频帧、视频所携带的音频等表征信息,将其送入编解码器实现视频内容的文本表述。在MSR-VTT和LSMDC数据集上的实验结果表明,所提模型的BLEU4、METEOR、ROUGEL和CIDEr指标分别为0.386、0.250、0.609和0.463,相较于MSR-VTT挑战赛中IIT DeIhi发布的模型,分别提升了0.082、0.037、0.115和0.257,能有效提升视频内容文本表述的准确率。 展开更多
关键词 视频内容文本描述 多模态融合 联合表示 协作表示 自注意力机制
下载PDF
基于协同表示的步态识别 被引量:8
11
作者 李占利 崔磊磊 刘金瑄 《计算机应用研究》 CSCD 北大核心 2016年第9期2878-2880,共3页
将基于稀疏表示的分类算法应用于步态识别中,会遇到小样本及计算耗时的问题。针对这一问题,提出一种基于协同表示的步态识别方法。该方法首先通过背景重建、目标提取等处理获得人体侧影轮廓,根据步态轮廓的宽度变化统计步态周期,得到步... 将基于稀疏表示的分类算法应用于步态识别中,会遇到小样本及计算耗时的问题。针对这一问题,提出一种基于协同表示的步态识别方法。该方法首先通过背景重建、目标提取等处理获得人体侧影轮廓,根据步态轮廓的宽度变化统计步态周期,得到步态能量图GEI;其次,以GEI为基础对测试样本进行协同表示;最后,通过最小重构误差进行识别。实验结果表明,该方法具有较好的识别性能,并且识别时间明显降低。 展开更多
关键词 步态识别 步态能量图 稀疏表示 协同表示
下载PDF
基于PCA和LBP的自适应加权融合人脸识别算法 被引量:8
12
作者 杨艳 郭振铎 徐庆伟 《中原工学院学报》 CAS 2018年第6期75-80,共6页
人脸识别技术易受光照、姿态和表情等影响,为增强人脸识别算法的鲁棒性,提出了一种基于PCA和LBP的自适应加权融合识别算法。首先,采用PCA和LBP算法提取人脸图像的特征;然后,利用CRC-RLS算法分别计算不同特征对应的协同表示误差;最后,提... 人脸识别技术易受光照、姿态和表情等影响,为增强人脸识别算法的鲁棒性,提出了一种基于PCA和LBP的自适应加权融合识别算法。首先,采用PCA和LBP算法提取人脸图像的特征;然后,利用CRC-RLS算法分别计算不同特征对应的协同表示误差;最后,提出一种基于L2范数的CCI指标,自适应地计算融合权重,并采用分数层加权融合策略实现对人脸图像的识别。实验结果表明,相对于传统的基于PCA或LBP特征的人脸识别算法,本文算法不仅具有较好的鲁棒性,而且可以显著提高人脸图像的识别率。 展开更多
关键词 人脸识别 LBP PCA 协同表示 分数层融合
下载PDF
基于多方向Gabor特征图协同表示的鲁棒人脸识别 被引量:8
13
作者 张培 徐望明 +1 位作者 伍世虔 靳晓缘 《中南大学学报(自然科学版)》 EI CAS CSCD 北大核心 2020年第2期377-384,共8页
为提高基于稀疏表示分类(SRC)算法在可变光照、姿态和表情下的人脸识别性能,提出一种基于多方向Gabor特征图(MGFM)和协同表示分类(CRC)的鲁棒人脸识别方法。首先,对人脸图像进行多方向多尺度Gabor变换,并融合同一方向不同尺度的Gabor特... 为提高基于稀疏表示分类(SRC)算法在可变光照、姿态和表情下的人脸识别性能,提出一种基于多方向Gabor特征图(MGFM)和协同表示分类(CRC)的鲁棒人脸识别方法。首先,对人脸图像进行多方向多尺度Gabor变换,并融合同一方向不同尺度的Gabor特征;其次,在每个方向的融合特征图上提取Gist特征。在进行人脸识别时,可采取2种方法:1)将人脸图像所有方向的Gist特征直接串联或自适应加权后串联构成人脸全局特征向量,并使用协同表示分类器得到识别结果;2)对人脸图像每个方向的Gist特征向量分别使用协同表示分类器进行预分类,预分类时使用自适应K近邻策略确定候选类并进行评分,取总得分最高的类作为识别结果。最后,在ORL,Extended Yale B和AR等人脸数据库上开展人脸识别实验,由提出的方法分别取得99.8%,100%和99.7%的识别准确率和较快的执行速度。研究结果表明:本文方法利用多方向Gabor特征图(MGFM)建立人脸图像的特征表示能有效描述人脸局部信息,利用自适应K近邻策略改进协同表示分类算法能取得较高的识别准确率和执行效率。 展开更多
关键词 人脸识别 协同表示 多方向Gabor特征图 自适应K近邻
下载PDF
高光谱图像自适应核联合表示异常检测 被引量:6
14
作者 唐意东 黄树彩 +1 位作者 凌强 钟宇 《强激光与粒子束》 EI CAS CSCD 北大核心 2015年第9期49-55,共7页
针对高光谱图像目标检测问题,提出了一种基于自适应核联合表示的高光谱图像异常检测方法。相比于稀疏表示强调系数向量的稀疏性,基于联合表示的检测算法更强调背景字典中每一原子对联合表示的贡献,并且系数求解更加简单直接;在基于向量2... 针对高光谱图像目标检测问题,提出了一种基于自适应核联合表示的高光谱图像异常检测方法。相比于稀疏表示强调系数向量的稀疏性,基于联合表示的检测算法更强调背景字典中每一原子对联合表示的贡献,并且系数求解更加简单直接;在基于向量2-范数极小化问题求解联合表示系数时,引入相似性正则化矩阵与和为1的条件对系数进行约束,以增强算法的稳定性和分辨力;进而将联合表示检测算法扩展到核空间,利用高光谱图像的局部统计特性进行核参数自适应选取,增强了核参数的局部适应性。为验证该方法的有效性,采用一幅实测高光谱图像中的两个感兴趣区域进行仿真实验,并与传统异常检测方法的检测结果进行对比分析,结果表明该方法具有较传统异常检测方法更出色的检测效果。 展开更多
关键词 高光谱图像 联合表示 自适应核联合表示 异常检测
下载PDF
波段选择协同表达高光谱异常探测算法 被引量:7
15
作者 朱德辉 杜博 张良培 《遥感学报》 EI CSCD 北大核心 2020年第4期427-438,共12页
高光谱遥感影像具有光谱分辨率极高的特点,承载了大量可区分不同类型地物的诊断性光谱信息以及区分亚类相似地物之间细微差别的光谱信息,在目标探测领域具有独特的优势。与此同时,高光谱遥感影像也带来了数据维数高、邻近波段之间存在... 高光谱遥感影像具有光谱分辨率极高的特点,承载了大量可区分不同类型地物的诊断性光谱信息以及区分亚类相似地物之间细微差别的光谱信息,在目标探测领域具有独特的优势。与此同时,高光谱遥感影像也带来了数据维数高、邻近波段之间存在大量冗余信息的问题,高维度的数据结构往往使得高光谱影像异常目标类和背景类之间的可分性降低。为了缓解上述问题,本文提出了一种基于波段选择的协同表达高光谱异常探测算法。首先,使用最优聚类框架对高光谱波段进行选择,获得一组波段子集来表示原有的全部波段,使得高光谱影像异常目标类与背景类之间的可分性增强。然后使用协同表达对影像上的像元进行重建,由于异常目标类和背景类之间的可分性增强,对异常目标像元进行协同表达时将会得到更大的残差,异常目标像元的输出值增大,可以更好地实现异常目标和背景类的分离。本文使用了3组高光谱影像数据进行异常目标探测实验,实验结果表明,该方法与其他现有高光谱异常目标探测算法对比,曲线下面积AUC(Area Under Curve)值更高,可以更好地实现异常目标与背景分离,能够更有效地对高光谱影像进行异常目标探测。 展开更多
关键词 遥感 异常探测 波段选择 协同表达 高光谱影像 高分五号卫星
原文传递
基于正交Log-Gabor滤波二值模式的人脸识别算法 被引量:7
16
作者 杨恢先 付宇 +1 位作者 曾金芳 徐唱 《智能系统学报》 CSCD 北大核心 2019年第2期330-337,共8页
为消除可变光照对人脸识别的影响,提出一种基于正交Log-Gabor滤波二值模式(OLGBP)的人脸识别算法。该算法对样本在正交方向做Log-Gabor变换,然后将所得特征图像进行虚实分解和同尺度多方向二值融合构成OLGBP特征向量,再将这些特征向量... 为消除可变光照对人脸识别的影响,提出一种基于正交Log-Gabor滤波二值模式(OLGBP)的人脸识别算法。该算法对样本在正交方向做Log-Gabor变换,然后将所得特征图像进行虚实分解和同尺度多方向二值融合构成OLGBP特征向量,再将这些特征向量构成协同表征字典D。最后,在字典D下对测试样本采用协同表征求稀疏系数,并通过误差重构来分类。在AR、Extend Yale B和CAS-PEAL-R1人脸数据库上的实验结果表明,OLGBP算法对光照变化的单样本人脸识别具有较好的效果,从而验证了算法的有效性。 展开更多
关键词 人脸识别 LOG-GABOR滤波器 协同表征 正交 稀疏编码 二值模式 单样本 多尺度
下载PDF
核协同表示下的多特征融合场景识别 被引量:7
17
作者 宗海燕 吴秦 +1 位作者 王田辰 张淮 《计算机科学与探索》 CSCD 北大核心 2019年第6期1038-1048,共11页
针对复杂场景识别中单一特征提供信息不充分这一问题情况,提出一种多尺度远距离点差值统计变换特征。通过Gabor滤波获得图像的多尺度特征信息,在像素图和滤波图上分别提取改进的远距离点差值统计变换特征,从而生成多尺度描述子,最后将... 针对复杂场景识别中单一特征提供信息不充分这一问题情况,提出一种多尺度远距离点差值统计变换特征。通过Gabor滤波获得图像的多尺度特征信息,在像素图和滤波图上分别提取改进的远距离点差值统计变换特征,从而生成多尺度描述子,最后将多尺度统计变换特征和视觉词袋模型特征通过核协同表示融合后进行场景分类。该方法充分考虑了尺度信息和远距离点信息,解决了单一特征区分度低的问题。算法在两个标准数据集上进行对比实验,结果表明所提算法取得了较好的识别效果。 展开更多
关键词 场景分类 多尺度 统计特征 协同表示
下载PDF
基于样本内外协同表示和自适应融合的多模态学习方法
18
作者 黄学坚 马廷淮 王根生 《计算机研究与发展》 EI CSCD 北大核心 2024年第5期1310-1324,共15页
多模态机器学习是一种新的人工智能范式,结合各种模态和智能处理算法以实现更高的性能.多模态表示和多模态融合是多模态机器学习的2个关键任务.目前,多模态表示方法很少考虑样本间的协同,导致特征表示缺乏鲁棒性,大部分多模态特征融合... 多模态机器学习是一种新的人工智能范式,结合各种模态和智能处理算法以实现更高的性能.多模态表示和多模态融合是多模态机器学习的2个关键任务.目前,多模态表示方法很少考虑样本间的协同,导致特征表示缺乏鲁棒性,大部分多模态特征融合方法对噪声数据敏感.因此,在多模态表示方面,为了充分学习模态内和模态间的交互,提升特征表示的鲁棒性,提出一种基于样本内和样本间多模态协同的表示方法.首先,分别基于预训练的BERT,Wav2vec 2.0,Faster R-CNN提取文本特征、语音特征和视觉特征;其次,针对多模态数据的互补性和一致性,构建模态特定和模态共用2类编码器,分别学习模态特有和共享2种特征表示;然后,利用中心矩差异和正交性构建样本内协同损失函数,采用对比学习构建样本间协同损失函数;最后,基于样本内协同误差、样本间协同误差和样本重构误差设计表示学习函数.在多模态融合方面,针对每种模态可能在不同时刻表现出不同作用类型和不同级别的噪声,设计一种基于注意力机制和门控神经网络的自适应的多模态特征融合方法.在多模态意图识别数据集MIntRec和情感数据集CMU-MOSI,CMU-MOSEI上的实验结果表明,该多模态学习方法在多个评价指标上优于基线方法. 展开更多
关键词 多模态表示 多模态融合 多模态学习 协同表示 自适应融合
下载PDF
基于目标域局部近邻几何信息的域自适应图像分类方法 被引量:6
19
作者 唐宋 陈利娟 +1 位作者 陈志贤 叶茂 《计算机应用》 CSCD 北大核心 2017年第4期1164-1168,共5页
在许多实际工程应用中,训练场景(源域)和测试场景(目标域)的分布并不相同,如果将源域中训练的分类器直接应用到目标域,性能往往会出现大幅度下降。目前大多数域自适应方法以概率推导为基础。从图像特征表达的角度出发,针对自适应图像分... 在许多实际工程应用中,训练场景(源域)和测试场景(目标域)的分布并不相同,如果将源域中训练的分类器直接应用到目标域,性能往往会出现大幅度下降。目前大多数域自适应方法以概率推导为基础。从图像特征表达的角度出发,针对自适应图像分类问题,提出一种新的基于协同特征的无监督方法。首先,所有源样本被作为字典;然后,距离目标样本最近的三个目标域样本被用来帮助鲁棒地表达局部近邻几何信息;最后,结合字典和局部近邻信息实现编码,并利用最近邻分类器完成分类。因为协同特征通过融合目标域局部近邻信息,获得了更强的鲁棒性和区分性,基于该特征编码的分类方法具有更好的分类性能。在域自适应数据集上的对比实验结果表明所提算法是有效的。 展开更多
关键词 域自适应 流形 目标域局部近邻关系 协同表达 图像分类
下载PDF
混合样本协同表示算法的人脸识别研究 被引量:6
20
作者 杨明中 杨平先 林国军 《液晶与显示》 CAS CSCD 北大核心 2017年第12期987-992,共6页
在人脸识别中,人脸图像受到表情、光照、遮挡、姿态变化、特别是训练样本数量的影响,而现实中经常只获得少量的训练样本,由于原始样本生成虚拟样本可以增加训练样本的数量,分析提出原始样本与轴对称样本融合的协同表示算法。首先生成镜... 在人脸识别中,人脸图像受到表情、光照、遮挡、姿态变化、特别是训练样本数量的影响,而现实中经常只获得少量的训练样本,由于原始样本生成虚拟样本可以增加训练样本的数量,分析提出原始样本与轴对称样本融合的协同表示算法。首先生成镜像样本与轴对称样本,再在协同表示分类器下分类,最后加权值融合,分析不同权值下的人脸识别率。实验结果显示原始样本、镜像样本与轴对称样本融合能提高识别率,而原始样本与轴对称样本融合的识别率更加优越,较原始样本,识别率提高2%~9%,比原始样本与镜像样本融合高1%~5%。结果表明本文提出方法能有效提高人脸识别率。 展开更多
关键词 人脸识别 镜像样本 轴对称样本 协同表示 权值融合
下载PDF
上一页 1 2 11 下一页 到第
使用帮助 返回顶部