面向跨模态检索的音频数据库内容匹配方法研究 被引量：4

1

作者 张天 靳聪 +1 位作者 帖云 李小兵 《信号处理》 CSCD 北大核心 2020年第6期966-976,共11页

跨模态检索旨在通过以某一模态的数据为查询词,使人们能够得到与之相关的其他不同模态数据的检索结果的新型检索方法,这已成为多媒体和信息检索领域中一个有趣的研究问题。但是,目前大多数的研究成果集中于文本到图像、文本到视频以及... 跨模态检索旨在通过以某一模态的数据为查询词,使人们能够得到与之相关的其他不同模态数据的检索结果的新型检索方法,这已成为多媒体和信息检索领域中一个有趣的研究问题。但是,目前大多数的研究成果集中于文本到图像、文本到视频以及歌词到音频等跨模态相关任务上,而关于如何为特定的视频通过跨模态检索得到合适的音乐这一跨模态的相关研究却很有限。此外,大多现有的关于视频和音频跨模态的研究依赖于元数据(例如关键字,标签或描述)。本文介绍了一种基于音频和视频这两种模态数据内容的跨模态检索的方法,该方法以新型的双流处理网络为框架,并通过神经网络学习两模态数据在公共子空间的特征表达,以计算音频和视频数据之间的相似度。本文所提出的方法的创新点主要在以下三个方面:1)在原有的提取各模态特征的模型基础上引入注意力机制,以此得到了视频和音频的特征选择模型,并筛选出相应的特征表达。2)使用了样本挖掘机制,剔除了无效样本,使得数据的训练更加高效。3)从计算模态间相似性和保持模态内结构不变两方面出发,利用了相应的损失函数进行模型的训练。且所提出的模型在VEGAS数据集和自建数据集上都取得了较高的准确度。 展开更多

关键词 深度学习 公共子空间 跨模态检索

下载PDF 职称材料

基于改进流形正则化随机配置网络的软测量

2

作者 杜知微 张凤南 杨海 《控制工程》 CSCD 北大核心 2023年第5期872-880,共9页

为提高复杂工业过程中某些关键参数的预测精度,提出一种基于改进流形正则化随机配置网络(improved manifold regularization stochastic configuration networks,IMRSCNs)的软测量建模方法。该方法首先采用基于迁移学习的特征提取思路,... 为提高复杂工业过程中某些关键参数的预测精度,提出一种基于改进流形正则化随机配置网络(improved manifold regularization stochastic configuration networks,IMRSCNs)的软测量建模方法。该方法首先采用基于迁移学习的特征提取思路,集成最大方差、协方差分布差异和最大均值差异获取特征变换矩阵,将训练集和测试集的特征信息投影到一个公共子空间。进一步将子空间的训练集数据输入带有流形正则化的随机配置网络中,训练网络模型,以保持数据在原特征空间的几何结构。通过多组实验结果表明,相较于原始随机配置网络(stochastic configuration networks,SCNs),所提的改进流形正则化SCNs模型拥有更高的预测精度和更好的泛化性能。 展开更多

关键词 流形正则化 随机配置网络 公共子空间 软测量建模

下载PDF 职称材料

基于单簇聚类的非对齐多视图异常检测算法 被引量：4

3

作者 史小艳 陈松灿 《中国科学：信息科学》 CSCD 北大核心 2021年第12期2037-2052,共16页

多视图数据广泛存在于现实,而异常也不可避免地伴随其中.现有的多视图异常检测方法针对的都是对齐的多视图场景,无法胜任更具挑战的非对齐多视图场景.为此,本文提出了4种基于单簇可能性C–均值(possibilistic C-means,PCM),即P1M(PCM,C... 多视图数据广泛存在于现实,而异常也不可避免地伴随其中.现有的多视图异常检测方法针对的都是对齐的多视图场景,无法胜任更具挑战的非对齐多视图场景.为此,本文提出了4种基于单簇可能性C–均值(possibilistic C-means,PCM),即P1M(PCM,C=1)算法的非对齐多视图异常检测算法.不同于对齐的多视图场景,非对齐特性造成了样本在各视图间对应关系的缺失,以致我们无法利用在对齐场景下示例级的局部关键信息.为此,我们设法通过各视图的全局信息进行学习.本文的关键之处在于借助交替优化法为各视图分别学得一个变换矩阵,用其将各视图投影到一个公共子空间,进而在该公共子空间中用P1M学得所有训练数据对目标类的隶属度,并设置隶属度阈值,从而实现异常检测.在多个UCI数据集上的实验结果表明,本文方法能够有效应对非对齐多视图场景中的异常检测. 展开更多

关键词 可能性C–均值 非对齐多视图 异常检测 公共子空间 单簇

原文传递

图约束的半监督对抗跨模态检索方法研究 被引量：2

4

作者 宣瑞晟 欧卫华 +1 位作者 宋浩强 张仁津 《贵州师范大学学报（自然科学版）》 CAS 2019年第4期86-94,共9页

跨模态检索是指给定一种模态的查询词,返回与之语义相关的其他模态关联词的一种检索方法。现有工作主要集中监督式跨模态检索方法研究,而实际应用中样本标签少,样本标签获取成本高。为此,提出一种图约束的半监督对抗跨模态检索方法(SS-A... 跨模态检索是指给定一种模态的查询词,返回与之语义相关的其他模态关联词的一种检索方法。现有工作主要集中监督式跨模态检索方法研究,而实际应用中样本标签少,样本标签获取成本高。为此,提出一种图约束的半监督对抗跨模态检索方法(SS-ACMR)。该方法通过对无标签样本建立图作为约束条件来学习公共子空间表示。具体而言,在对抗学习框架下:1)对无标签样本,根据样本之间欧式距离构建图,希望相似样本的公共子空间表示是相似的;2)对有标签样本使用传统的对抗跨模态检索方法进行学习;3)无标签样本和有标签样本在对抗学习框架下共同学习公共子空间的表示。Wikipedia数据集和NUSWIDE-10k数据集上的实验结果表明:本文的方法得到了和现有监督跨模态检索方法相当的检索结果,远好于现有半监督跨模态检索方法。 展开更多

关键词 跨模态检索 对抗学习 半监督 图约束 公共子空间

下载PDF 职称材料

共享子空间的多标记学习方法 被引量：1

5

作者 杨柳 邹珊 +1 位作者 于剑 景丽萍 《计算机科学与探索》 CSCD 北大核心 2015年第8期963-972,共10页

在多标记问题中,一个样本对应的多个类别之间经常会存在一定的相关性,这些相关性可以为多标记分类提供有用的信息。已有的多标记学习对于类别之间的相关性研究是建立在原始数据上的,然而原始数据往往是高维且含有噪声的,使得已有学习方... 在多标记问题中,一个样本对应的多个类别之间经常会存在一定的相关性,这些相关性可以为多标记分类提供有用的信息。已有的多标记学习对于类别之间的相关性研究是建立在原始数据上的,然而原始数据往往是高维且含有噪声的,使得已有学习方法无法达到满意的效果。提出了一种基于共享子空间的多标记学习方法。该方法可以在类别信息的指导下,学到从原始特征空间到高层共享空间的映射函数,从而可以把原始的高维数据映射到一个低维空间中。同时也学到一个从类别空间到高层空间的映射函数,使得数据进行低维的重新表示后,可以直接对应到类别信息。在5个实际的数据集合上进行了测试,实验结果表明该模型可以有效地提高多标记数据的分类性能。 展开更多

关键词 多标记学习 共享子空间 类别相关性

下载PDF 职称材料

子空间超循环性与公共的子空间超循环向量(英文)

6

作者 赵显锋 舒永录 周云华 《华东师范大学学报（自然科学版）》 CAS CSCD 北大核心 2012年第1期106-112,120,共8页

若无限维可分的Banach空间上的线性有界算子T满足:对某个非零子空间M,存在向量x使C·O(x,T)∩M在M中稠密,则称T是子空间超循环算子.构造例子说明了子空间超循环性并非是无限维现象,以及子空间超循环算子并不一定是超循环的;同时,还... 若无限维可分的Banach空间上的线性有界算子T满足:对某个非零子空间M,存在向量x使C·O(x,T)∩M在M中稠密,则称T是子空间超循环算子.构造例子说明了子空间超循环性并非是无限维现象,以及子空间超循环算子并不一定是超循环的;同时,还给出了一个子空间超循环准则和一族算子的公共的子空间亚超循环(子空间超循环)向量是稠密Gδ集的充要条件. 展开更多

关键词 子空间超循环性 公共的子空间亚超循环向量 公共的子空间超循环向量

下载PDF 职称材料

使用异构互联网图像组的视频标注 被引量：7

7

作者 王晗 吴心筱 贾云得 《计算机学报》 EI CSCD 北大核心 2013年第10期2062-2069,共8页

标注用户视频中的事件是一项极具挑战性的工作.目前的研究主要关注如何从大量的已标注视频中获取视频相关概念,并用来标注未知的用户视频.现实场景下的视频具有复杂性和多样性的特点,建模需要收集大量已标注的视频训练样本,这个过程非... 标注用户视频中的事件是一项极具挑战性的工作.目前的研究主要关注如何从大量的已标注视频中获取视频相关概念,并用来标注未知的用户视频.现实场景下的视频具有复杂性和多样性的特点,建模需要收集大量已标注的视频训练样本,这个过程非常费时费力.为了缓解这一问题,作者利用大量互联网图像来建立模型,这些图像数据涵盖了各种环境下的各种事件.然而,从互联网上得到的知识变化多样且有噪声,如果不加选择而盲目进行知识迁移,反而会影响视频标注的效果.因此,作者提出了一种联合组权重学习框架来权衡互联网上不同但相关的图像组,并用这些知识建立视频标注模型.在该框架下,作者采用联合优化的方法来获得不同图像组的权重,每一个权重值表示了相应的图像组在知识迁移中所起的作用.为了解决视频与图像特征的异构问题,作者建立了一个共同特征子空间来连接视频和图像这两个特征空间.两个视频数据库上的实验结果表明了文中方法的有效性. 展开更多

关键词 知识迁移 视频标注 互联网图像搜索引擎 共同特征子空间

下载PDF 职称材料

基于支持向量机的脑电信号中左右手判别 被引量：4

8

作者 唐艳 汤井田 《计算机工程与应用》 CSCD 北大核心 2007年第34期204-206,232,共4页

在脑-机接口的研究中分类识别技术占有重要地位。介绍了一种方法,用于对单次信号的分类。这种方法主要思想是将共空域子空间分解和支持向量机相结合,以便提取信号特征。该方法被用于"BCICompetition2003"第IV数据包上,分类正... 在脑-机接口的研究中分类识别技术占有重要地位。介绍了一种方法,用于对单次信号的分类。这种方法主要思想是将共空域子空间分解和支持向量机相结合,以便提取信号特征。该方法被用于"BCICompetition2003"第IV数据包上,分类正确率达89%。 展开更多

关键词 脑电信号 脑-机接口 支持向量机 共空域子空间分解

下载PDF 职称材料

CSSD+AAR模型在脑电信号处理中的应用 被引量：4

9

作者 刘琳 魏庆国 《通信技术》 2009年第10期207-210,共4页

针对BCI技术中的脑电信号处理方法和事件相关去同步化的特点,提出了一种结合时、频、空域的特征提取方法。结合CSSD和AAR模型来提取脑电特征,并对基于AAR模型系数的特征提取方法进行了探讨,最终选择卡尔曼平滑算法提取模型系数,然后将... 针对BCI技术中的脑电信号处理方法和事件相关去同步化的特点,提出了一种结合时、频、空域的特征提取方法。结合CSSD和AAR模型来提取脑电特征,并对基于AAR模型系数的特征提取方法进行了探讨,最终选择卡尔曼平滑算法提取模型系数,然后将提取的特征用简单的线性分类器进行分类。实验结果表明测试集的分类正确率达到了94.08%,而且这种特征提取方法有很好的时间分辨率,适合于在线分类。这是一种正确率高,时间分辨率高,适合在线分类的好方法。 展开更多

关键词 脑-机接口 脑电信号 共空域子空间分解 自适应自回归模型 卡尔曼平滑

原文传递

基于脑电信号的手指动作识别 被引量：2

10

作者 李同磊 刘伯强 +1 位作者 李可 于兰兰 《山东科学》 CAS 2006年第1期1-5,11,共6页

分类识别技术在脑-机接口的研究中占有重要地位,本文基于在事件相关脑电图中,存在的运动感觉皮层脑电位下降和事件相关非同步现象,运用了一种基于共空域子空间分解的算法,对左右手指动作时的多通道脑电信号进行了特征提取。最后,根据提... 分类识别技术在脑-机接口的研究中占有重要地位,本文基于在事件相关脑电图中,存在的运动感觉皮层脑电位下降和事件相关非同步现象,运用了一种基于共空域子空间分解的算法,对左右手指动作时的多通道脑电信号进行了特征提取。最后,根据提取的特征进行了手指动作的识别,在对三个人的脑电数据识别中,平均识别率达到了75.6%。 展开更多

关键词 脑-机接口(BCI) 脑电图(EEG) 共空域子空间分解(CSSD)

下载PDF 职称材料

多流形耦合映射下的低分辨人脸识别 被引量：2

11

作者 郑冬冬 张凯兵 《西安工程大学学报》 CAS 2019年第6期666-672,共7页

探讨低分辨人脸识别中如何保持高低分辨率人脸图像特征在公共特征子空间的一致性问题。基于耦合映射方法,联合利用高低分辨率人脸图像的局部流形几何结构信息与标签信息,增强耦合映射关系矩阵的判别能力和可分性,使得相同类别的高低分... 探讨低分辨人脸识别中如何保持高低分辨率人脸图像特征在公共特征子空间的一致性问题。基于耦合映射方法,联合利用高低分辨率人脸图像的局部流形几何结构信息与标签信息,增强耦合映射关系矩阵的判别能力和可分性,使得相同类别的高低分辨率人脸图像在公共特征子空间中的距离应尽可能接近,而不同类别的高低分辨率人脸图像之间的距离应尽可能疏远。在3个标准人脸库中对提出方法的有效性进行了验证。实验结果表明,该方法在不同的特征维度、Rank级别和分辨率下较同类方法均有明显地提升,具有较好地应用潜能。 展开更多

关键词 低分辨人脸识别 耦合映射 流形学习 公共特征子空间 标签信息

下载PDF 职称材料

基于CSSD-DE通道选择算法的ECoG分类研究 被引量：2

12

作者 王金甲 尹涛 《中国生物医学工程学报》 CAS CSCD 北大核心 2012年第5期712-719,共8页

在脑机接口(BCI)的研究中,通道在提取脑电信息的过程中起着十分关键的作用。本研究提出基于共空域子空间分解-微分进化算法(CSSD-DE)的脑机接口通道选择方法,并且使用逻辑线性分类器进行分类。在对皮层脑电信号(ECoG)进行通道选择的过... 在脑机接口(BCI)的研究中,通道在提取脑电信息的过程中起着十分关键的作用。本研究提出基于共空域子空间分解-微分进化算法(CSSD-DE)的脑机接口通道选择方法,并且使用逻辑线性分类器进行分类。在对皮层脑电信号(ECoG)进行通道选择的过程中取得了使用少数通道就可以达到令人满意的分类效果。当最优通道个数为6,识别正确率达到93%,优于2005年脑机接口竞赛III数据集I的第一名的正确率(91%)。并提出将最大相关最小冗余度(mRMR)和支持向量机回归特征消去(SVM-RFE)算法应用于通道选择进行对比,mRMR算法得出最优通道个数为7,识别正确率为87%,SVM-RFE算法得出的最优通道个数为6,识别正确率为81%。 展开更多

关键词 脑机接口 通道选择 共空域子空间分解 微分进化算法

下载PDF 职称材料

基于卡尔曼滤波的ECoG信号去噪方法研究 被引量：2

13

作者 王金甲 侯亚培 《燕山大学学报》 CAS 2012年第5期452-457,共6页

脑电信号反映了生物体的大脑活动,在采集和处理过程中极易受到各种噪声的干扰,如眨眼、快速眼动、心电、肌电等,这些噪声给脑电信号的分析处理带来了很大的困难。本文提出了卡尔曼滤波模型和模型参数估计的方法,将其应用于脑电ECoG信号... 脑电信号反映了生物体的大脑活动,在采集和处理过程中极易受到各种噪声的干扰,如眨眼、快速眼动、心电、肌电等,这些噪声给脑电信号的分析处理带来了很大的困难。本文提出了卡尔曼滤波模型和模型参数估计的方法,将其应用于脑电ECoG信号去噪预处理。实验所用的数据是公开的脑机接口竞赛实验数据(BCI Competition Ⅲ dataset Ⅰ),分类正确率为92%。实验结果表明通过本方法去噪预处理后,分类正确率比竞赛第一名高,并且优于小波去噪与谱减法等预处理方法。 展开更多

关键词 卡尔曼滤波 皮层脑电信号 去噪 脑机接口 共空域子空间分解

下载PDF 职称材料

核共空域子空间分解特征提取算法研究 被引量：1

14

作者 王金甲 张玲智 《中国生物医学工程学报》 CAS CSCD 北大核心 2012年第3期428-433,共6页

脑-机接口中特征提取算法是脑电信号处理的关键步骤。提出一种基于核方法的核共空域子空间分解特征提取算法,将用于多通道两类别分类的共空域子空间分解算法推广到核空间。应用新算法对BCI竞赛Ⅱ的数据集Ⅳ进行实验仿真。实验中核函数... 脑-机接口中特征提取算法是脑电信号处理的关键步骤。提出一种基于核方法的核共空域子空间分解特征提取算法,将用于多通道两类别分类的共空域子空间分解算法推广到核空间。应用新算法对BCI竞赛Ⅱ的数据集Ⅳ进行实验仿真。实验中核函数使用的是线性核函数,求解空域滤波器时,为了减小计算的压力,在原空间对每一个试验的训练数据进行层次聚类,训练的分类器为最近邻分类器,实验的测试集结果为84%,与数据集Ⅳ的竞赛胜利者的分类结果相同。 展开更多

关键词 脑机接口 特征提取 共空域子空间分解 核方法 层次聚类

下载PDF 职称材料

基于RCE的空间滤波方法在运动想象电位识别中的应用

15

作者 张守中 肖瑛 《计算机与现代化》 2014年第9期116-119,142,共5页

在对运动想象电位进行模式识别时,需要对原始信号进行滤波以提取信号中区分度较高的成分用于分类,而在噪声较为严重时,滤波方法会导致有用信息的丢失,从而降低分类正确率。针对该问题,本文提出节律成分提取(Rhythmic Component Extracti... 在对运动想象电位进行模式识别时,需要对原始信号进行滤波以提取信号中区分度较高的成分用于分类,而在噪声较为严重时,滤波方法会导致有用信息的丢失,从而降低分类正确率。针对该问题,本文提出节律成分提取(Rhythmic Component Extraction,RCE)与共空子空间分解(The Common Spatial Subspace Decomposition,CSSD)相结合的特征提取方法,对提取的特征信息使用线性分类器进行分类。采用该方法对2003年国际BCI竞赛数据进行识别,测试数据的分类正确率达到87.23%,比使用传统空间滤波方法进行特征提取时的分类正确率提高了6.8%,表明该方法可有效地应用于左右手运动想象电位的识别。 展开更多

关键词 运动想象电位 脑电信号 共空子空间分解 节律成分提取

下载PDF 职称材料

基于CSSD和SVM脑电分类技术的研究

16

作者 程善光 赵伟鹏 《中国西部科技》 2013年第2期7-8,共2页

本文研究的BCI实验是基于BCI2003竞赛数据来对脑电信号分类。本文提出了一种脑电信号趋势的概念,使用支持向量机(SVM)作为分类器的算法。首先将BCI2003竞赛数据通过中值滤波器和由小波函数构成的带通滤波器,然后用时间窗进行时域上地过... 本文研究的BCI实验是基于BCI2003竞赛数据来对脑电信号分类。本文提出了一种脑电信号趋势的概念,使用支持向量机(SVM)作为分类器的算法。首先将BCI2003竞赛数据通过中值滤波器和由小波函数构成的带通滤波器,然后用时间窗进行时域上地过滤,选取对于大脑思维活动现象表现最明显的一段数据,再通过共空域子空间分解(CSSD)从脑电信号中提取特征,最后基于提取的特征,通过SVM训练后,进行分类识别,分类识别率达到了85%～96%。实验中采用的特征提取方法和分类方法对于脑电信号的分类识别准确率提高了不少。 展开更多

关键词 共空域子空间分解 支持向量机 脑机接口 脑电信号趋势

下载PDF 职称材料

城市综合实力增长的比较 被引量：10

17

作者 李汶华 《数理统计与管理》 CSSCI 北大核心 2000年第1期39-43,共5页

本文基于多个总体的主成分分析方法，对城市综合实力增长的比较进行一些探索性的研究。对我国十八个大城市１９９４年、１９９５年和１９９６年的八个指标用多个总体的主成分分析方法进行分析，通过检验和计算，得到这三个总体的公共主... 本文基于多个总体的主成分分析方法，对城市综合实力增长的比较进行一些探索性的研究。对我国十八个大城市１９９４年、１９９５年和１９９６年的八个指标用多个总体的主成分分析方法进行分析，通过检验和计算，得到这三个总体的公共主成分子空间。取公共主成分子空间的一正交基作为这三个总体的新的主成分ＰＲＩＮ１的系数，此主成分即表示城市综合实力。计算出各城市任意两年间的综合实力差值，以此作为城市综合实力增长的度量，对城市综合实力增长再作主成分分析。 展开更多

关键词 综合实力 总体 主成分分析 城市 评估 中国

下载PDF 职称材料