基于Spark的并行SVM算法研究 被引量：17

1

作者 刘泽燊 潘志松 《计算机科学》 CSCD 北大核心 2016年第5期238-242,共5页

随着数据规模的不断增加,支持向量机(SVM)的并行化设计成为数据挖掘领域的一个研究热点。针对SVM算法训练大规模数据时存在寻优速度慢、内存占用大等问题,提出了一种基于Spark平台的并行支持向量机算法(SP-SVM)。该方法通过调整层叠支... 随着数据规模的不断增加,支持向量机(SVM)的并行化设计成为数据挖掘领域的一个研究热点。针对SVM算法训练大规模数据时存在寻优速度慢、内存占用大等问题,提出了一种基于Spark平台的并行支持向量机算法(SP-SVM)。该方法通过调整层叠支持向量机(Cascade SVM)的合并策略和训练结构,并利用Spark分布式计算框架实现;其次,进一步分析并行操作算子的性能,优化算法并行化实现方案,有效克服了层叠模型训练效率低的缺点。实验结果表明,新的并行训练方法在损失较小精度的前提下,在一定程度上减少了训练时间,能够很好地提高模型的学习效率。 展开更多

关键词 并行计算 支持向量机 大规模数据 层叠模型 SPARK

下载PDF 职称材料

基于层叠模型的岩土材料流变本构关系识别 被引量：8

2

作者 范厚彬 樊志华 陆耀忠 《岩石力学与工程学报》 EI CAS CSCD 北大核心 2005年第5期768-773,共6页

层叠模型是一个强大流变模型库,层叠模型参数确定的过程也是本构关系识别的过程。在它的基础上,介绍了一种岩土材料流变本构关系的识别方法,为克服流变本构模型识别过程中强烈依赖于特定模型的不足提供了新的思路。通过目标函数对设计... 层叠模型是一个强大流变模型库,层叠模型参数确定的过程也是本构关系识别的过程。在它的基础上,介绍了一种岩土材料流变本构关系的识别方法,为克服流变本构模型识别过程中强烈依赖于特定模型的不足提供了新的思路。通过目标函数对设计变量的敏感度分析选取非线性优化初始值,较有效地克服了它在流变本构模型参数确定过程中易陷入局部极值的不足,从而为非线性位移反分析法(有限元与复形优化方法相结合)提供了一种初始值选取方法。 展开更多

关键词 岩土力学 层叠模型 位移反分析 优化方法

下载PDF 职称材料

基于改进的层叠SVM模型的入侵检测技术 被引量：3

3

作者 叶苗 王勇 麦范金 《微计算机信息》 北大核心 2008年第3期78-79,19,共3页

需要长时间的对大规模数据进行训练,是将支持向量机运用到入侵检测的异常检测中的主要困难之一。本文对此改进了一种层叠的分布式训练处理SVM模型,通过在KDD99标准数据集上的实验证明,可以很好地改善支持向量机训练的时间效率问题。

关键词 入侵检测 支持向量机 层叠模型 二次规划问题

下载PDF 职称材料

基于层叠模型的国防领域命名实体识别研究 被引量：5

4

作者 高强 游宏梁 《现代图书情报技术》 CSSCI 北大核心 2012年第11期47-52,共6页

提出一种基于层叠模型的命名实体识别方法,将基于规则与基于统计的方法有机结合,可以克服单层模型的局限性,同时能够继承基于规则与基于统计方法各自的优点。在国防领域命名实体识别实验中,该方法对主要类型的命名实体的识别F值都在89%... 提出一种基于层叠模型的命名实体识别方法,将基于规则与基于统计的方法有机结合,可以克服单层模型的局限性,同时能够继承基于规则与基于统计方法各自的优点。在国防领域命名实体识别实验中,该方法对主要类型的命名实体的识别F值都在89%以上。 展开更多

关键词 命名实体 命名实体识别 信息抽取 层叠模型 条件随机场

原文传递

基于用户隐式数据的个性化酒店推荐算法 被引量：3

5

作者 史达 于淼川 李梦琪 《山东大学学报（理学版）》 CAS CSCD 北大核心 2021年第7期1-10,共10页

在基于物品协同过滤的基础上,对隐式反馈数据进行挖掘建模,设计了隐式反馈偏好评分规则,并据此赋予了计算酒店相似度公式的新定义。考虑到用户的基本特征也会对用户个性化需求产生影响以及单一算法的局限性,进一步引入了XGBoost模型,利... 在基于物品协同过滤的基础上,对隐式反馈数据进行挖掘建模,设计了隐式反馈偏好评分规则,并据此赋予了计算酒店相似度公式的新定义。考虑到用户的基本特征也会对用户个性化需求产生影响以及单一算法的局限性,进一步引入了XGBoost模型,利用XGBoost训练对改进后的推荐结果进行过滤,得到较好的个性化酒店推荐系统。文中采用真实的脱敏数据,证明利用层叠模型构建个性化酒店推荐系统的推荐效果更加精准,对于酒店在线平台的个性化服务具有较强的参考价值。 展开更多

关键词 个性化酒店推荐 协同过滤 隐式反馈偏好设计 XGBoost模型 层叠模型

原文传递

条件随机场模型的应用研究及改进 被引量：3

6

作者 姜文志 顾佼佼 +1 位作者 胡文萱 栗飞 《计算机与现代化》 2011年第11期55-58,共4页

近些年来,条件概率模型的研究得到了很大的发展。在对序列标注类问题进行处理时,条件模型逐渐开始取代产生式模型,其应用领域相当广泛,条件概率模型可应用到图像识别、自然语言处理、入侵检测等问题上。条件随机场模型(Conditional Rand... 近些年来,条件概率模型的研究得到了很大的发展。在对序列标注类问题进行处理时,条件模型逐渐开始取代产生式模型,其应用领域相当广泛,条件概率模型可应用到图像识别、自然语言处理、入侵检测等问题上。条件随机场模型(Conditional Random Fields,CRFs)模型是条件模型中的代表模型,也是条件模型中现在研究得最多的模型之一。它避免了产生式模型的缺点,而且克服了前期最大熵模型标记偏置的缺陷,由此得到广泛的运用。在利用CRFs作具体应用研究时发现,单纯利用CRFs模型进行实际运用取得的效果并没有达到最好,所以在每个应用中均进行了改进。本文主要研究军用文书分词、军事命名实体识别、入侵检测等方面,所做的改进都在模型应用的基础上更进一步提高了系统的性能。 展开更多

关键词 条件随机场 序列标注 中文分词 命名实体 入侵检测 层叠模型

下载PDF 职称材料

基于遗传算法和层叠模型的软土流变模型辨识 被引量：2

7

作者 胡志平 范厚彬 罗丽娟 《应用力学学报》 CAS CSCD 北大核心 2005年第3期364-368,共5页

利用层叠模型编程方便的优点,采用层叠模型来考虑软土的粘弹塑性,研制了基于层叠模型的软土流变计算程序OMFEM;在此基础上,采用遗传算法来全局搜索软土流变参数,将软土流变层叠模型的计算程序OMFEM和遗传算法有机结合,编制了基于遗传算... 利用层叠模型编程方便的优点,采用层叠模型来考虑软土的粘弹塑性,研制了基于层叠模型的软土流变计算程序OMFEM;在此基础上,采用遗传算法来全局搜索软土流变参数,将软土流变层叠模型的计算程序OMFEM和遗传算法有机结合,编制了基于遗传算法和层叠模型的软土流变模型的辨识程序GAIOM,并最终实现了对软土流变模型和模型参数的辨识。工程实例证实了采用遗传算法和层叠模型来辨识软土流变模型的有效性。 展开更多

关键词 遗传算法 层叠模型 模型辨识

下载PDF 职称材料

基于判别模型与生成模型的层叠图像自动标注 被引量：2

8

作者 柯逍 李绍滋 曹冬林 《模式识别与人工智能》 EI CSCD 北大核心 2011年第3期305-313,共9页

图像自动标注是模式识别与计算机视觉等领域中重要而又具有挑战性的问题.针对现有模型存在数据利用率低与易受正负样本不平衡影响等问题,提出了基于判别模型与生成模型的新型层叠图像自动标注模型.该模型第一层利用判别模型对未标注图... 图像自动标注是模式识别与计算机视觉等领域中重要而又具有挑战性的问题.针对现有模型存在数据利用率低与易受正负样本不平衡影响等问题,提出了基于判别模型与生成模型的新型层叠图像自动标注模型.该模型第一层利用判别模型对未标注图像进行主题标注,获得相应的相关图像集;第二层利用提出的面向关键词的方法建立图像与关键词之间的联系,并使用提出的迭代算法分别对语义关键词与相关图像进行扩展;最后利用生成模型与扩展的相关图像集对未标注图像进行详细标注.该模型综合了判别模型与生成模型的优点,通过利用较少的相关训练图像来获得更好的标注结果.在Corel 5K图像库上进行的实验验证了该模型的有效性. 展开更多

关键词 图像自动标注 层叠模型 相关图像扩展 语义扩展

原文传递

基于层叠模型的网络流量异常检测方法 被引量：1

9

作者 李宗林 胡光岷 周汝强 《计算机应用研究》 CSCD 北大核心 2008年第9期2839-2841,2844,共4页

进行网络流量异常检测,需要对正常流量行为建立准确的模型,根据异常流量与正常模型间的偏离程度作出判断。针对现有网络流量模型中自相似模型与多分形模型无法全面刻画流量特征的不足,提出了一种基于流量层叠模型分析的异常检测算法,采... 进行网络流量异常检测,需要对正常流量行为建立准确的模型,根据异常流量与正常模型间的偏离程度作出判断。针对现有网络流量模型中自相似模型与多分形模型无法全面刻画流量特征的不足,提出了一种基于流量层叠模型分析的异常检测算法,采用层叠模型对整个时间尺度上的流量特征进行更准确的描述,并运用小波变换对流量的层叠模型进行估计,分析异常流量对模型估计的影响,提出统计累计偏离量进行异常流量检测的方法。仿真结果表明,该方法能够有效检测出基于自相似Hurst系数方法不能检测的弱异常以及未明显影响Hurst系数变化的异常流。 展开更多

关键词 异常检测 层叠模型 小波变换模极大

下载PDF 职称材料

基于层叠模型的话题检测方法研究 被引量：1

10

作者 谢林燕 张素香 戚银城 《郑州大学学报（理学版）》 CAS 北大核心 2012年第2期43-47,共5页

针对相似话题难以区分的问题,提出了基于层叠模型的话题检测方法.该方法以Single-Pass聚类策略为基础,将新闻实体信息运用到话题检测中,改进时间相似度和地点相似度的计算方法,在底层利用文本内容相似度完成话题检测的任务,在高层结合... 针对相似话题难以区分的问题,提出了基于层叠模型的话题检测方法.该方法以Single-Pass聚类策略为基础,将新闻实体信息运用到话题检测中,改进时间相似度和地点相似度的计算方法,在底层利用文本内容相似度完成话题检测的任务,在高层结合时间相似度和地点相似度完成话题检测的任务.实验结果表明,该方法的性能优于传统的文本相似度算法. 展开更多

关键词 话题检测 相似话题 向量空间模型 层叠模型

下载PDF 职称材料

基于条件随机场的实时入侵检测系统框架实现 被引量：1

11

作者 顾佼佼 姜文志 +1 位作者 栗飞 胡文萱 《海军航空工程学院学报》 2011年第5期543-548,共6页

入侵检测系统（IDS）如今是网络的重要组成部分，现在各种无线网络及专用网络都已配备检测系统。随着网络技术的迅猛发展，入侵检测的技术已经从简单的签名匹配发展成能充分利用上下文信息的基于异常和混合的检测方式。为了从网络环境... 入侵检测系统（IDS）如今是网络的重要组成部分，现在各种无线网络及专用网络都已配备检测系统。随着网络技术的迅猛发展，入侵检测的技术已经从简单的签名匹配发展成能充分利用上下文信息的基于异常和混合的检测方式。为了从网络环境大量记录信息中正确有效地识别出入侵，提出一种基于层叠条件随机场模型的入侵检测框架，该框架针对4类不同攻击方式利用条件随机场模型分别进行识别训练，然后逐层进行入侵识别，提高了入侵检测系统的自适应性和可移植性，降低了系统的误报率和误检率，可高精度的识别各种攻击。实验结果表明，该框架可实时有效的识别攻击，启动响应机制进行处理。 展开更多

关键词 入侵检测 条件随机场 机器学习 层叠模型

下载PDF 职称材料

光网络的接口技术

12

作者 戚天龙 郑小平 +1 位作者 张汉一 郭奕理 《光电子．激光》 EI CAS CSCD 北大核心 2002年第3期321-324,共4页

光网络的用户网络接口 (UNI)是光网络智能化、实用化的关键技术。本文阐述了其 3个主要的问题 ,即模型问题、功能问题和信令问题。

关键词 接口技术 用户网络接口 光网络 对等模型 层叠模型 带宽请求 光通信

原文传递

一种基于层叠模型的中文分词系统

13

作者 庞天杰 张虎 《太原师范学院学报（自然科学版）》 2013年第4期79-82,共4页

文章分析了山西大学在第四届SIGHAN国际分词评测中的分词系统.根据中文分词中所遇到的问题,对其进行归类并利用层叠模型的思想对分词结果进行逐步的优化,最终达到一个较理想的结果.在该系统中,歧义字段的处理和未登录词内部信息的提取... 文章分析了山西大学在第四届SIGHAN国际分词评测中的分词系统.根据中文分词中所遇到的问题,对其进行归类并利用层叠模型的思想对分词结果进行逐步的优化,最终达到一个较理想的结果.在该系统中,歧义字段的处理和未登录词内部信息的提取是主要解决的问题.实验结果表明,该系统在NCC(中国教育部国家语委)语料的开放测试中得到的正确率为94.46%,RIV得到较高的96.9%. 展开更多

关键词 分词 层叠模型 中文语料 歧义

下载PDF 职称材料

基于组块分析技术的中文机构名称识别 被引量：5

14

作者 尹继豪 樊孝忠 +1 位作者 赵攀超 于江德 《哈尔滨工程大学学报》 EI CAS CSCD 北大核心 2006年第B07期466-470,共5页

针对中文机构名称自动识别提出了简化的一体化N最佳层叠模型，该模型实现了从汉语切分、词性标注、组块分析一直到机构名称的自动识别．N最佳层叠方法既能够在一定程度上抑制前一个阶段的错误在后面的传播，又大大地缩小了搜索空间．在... 针对中文机构名称自动识别提出了简化的一体化N最佳层叠模型，该模型实现了从汉语切分、词性标注、组块分析一直到机构名称的自动识别．N最佳层叠方法既能够在一定程度上抑制前一个阶段的错误在后面的传播，又大大地缩小了搜索空间．在实验过程中依次加入启发信息和机构名称缩写处理，使得实验结果有显著提高．在IEER99测试集上，中文机构名称识别的最终准确率和召回率分别为92.31％和81．01％． 展开更多

关键词 组块分析 中文机构名称识别 N最佳层叠模型 启发信息

下载PDF 职称材料

基本公共服务均等化转移支付机制的创新研究 被引量：1

15

作者 于凌云 《保险研究》 北大核心 2010年第12期82-86,共5页

完善转移支付机制、促进城乡基本公共服务均等化,对缩小区域和城乡发展差距、促进社会公平公正、实现城乡统筹协调发展具有重要意义。本文通过建立分形层叠模型来模拟和解释转移支付机制的创新,并运用2007年～2009年的有关数据,对基本... 完善转移支付机制、促进城乡基本公共服务均等化,对缩小区域和城乡发展差距、促进社会公平公正、实现城乡统筹协调发展具有重要意义。本文通过建立分形层叠模型来模拟和解释转移支付机制的创新,并运用2007年～2009年的有关数据,对基本公共服务均等化系数进行模拟。结果显示,分形层叠模型方法能够有效顾及城乡基本公共服务这种不同空间的不同层级政府之间的均等化问题,系数调整方案也呈现出良好的逻辑关系,能较好地体现城乡公共服务均等化效果。 展开更多

关键词 基本公共服务均等化 转移支付机制 分形层叠模型

原文传递

中小板高送转概念选股过程中羊群行为实证研究

16

作者 李青云 《现代商贸工业》 2011年第9期157-159,共3页

以第四季度机构投资者增持比例为分组依据,利用分散度方法对中小板高送转概念股选股过程中先验性羊群行为的可能性进行了实证研究,对其选股原因进行了分析。发现中小板高送转概念股选股过程中确实存在羊群行为,并且存在较大程度的非理... 以第四季度机构投资者增持比例为分组依据,利用分散度方法对中小板高送转概念股选股过程中先验性羊群行为的可能性进行了实证研究,对其选股原因进行了分析。发现中小板高送转概念股选股过程中确实存在羊群行为,并且存在较大程度的非理性投资行为,其选股依据与基本面无显著关系,并进一步利用信息层叠模型结合中国股市的特殊情况验证了羊群行为的成因。 展开更多

关键词 羊群行为 高送转 机构投资者 分散度 信息层叠模型

下载PDF 职称材料

东非坦桑尼亚的地幔过渡带构造

17

作者 Thomas J.Owens 陈华静 《地震科技情报》 2001年第6期45-47,共3页

我们根据坦桑尼亚宽带地震试验结果。应用一个三维层叠模型，用以确定坦桑尼亚的地幔过渡带厚度的相对变化。东部断裂下面的过渡比未受断层运动影响的东非高原内部克拉通地区的过渡带薄30－40km，变薄的东非断裂过渡带有数百公里宽，并... 我们根据坦桑尼亚宽带地震试验结果。应用一个三维层叠模型，用以确定坦桑尼亚的地幔过渡带厚度的相对变化。东部断裂下面的过渡比未受断层运动影响的东非高原内部克拉通地区的过渡带薄30－40km，变薄的东非断裂过渡带有数百公里宽，并且S波速降低2％－3％，过渡带变薄和S波速度低，可能是温度升高200°－300°K的缘故，东非断裂下＞400km深度的这种温度异常，不能简单地用断层活动来解释，而是与东非的新生代断裂活动，火山作用和高原隆起有关。 展开更多

关键词 坦桑尼亚 地幔过渡带 克拉通 三维层叠模型 断裂活动 火山作用 断层活动

下载PDF 职称材料

基于层叠模型的盾构隧道施工对周围环境的影响 被引量：7

18

作者 范厚彬 《岩石力学与工程学报》 EI CAS CSCD 北大核心 2005年第6期1092-1092,共1页

针对当今预测盾构隧道施工引起地表及土层变形所存在的一些问题,以上海市重大工程项目——上海轨道交通明珠线二期工程(浦东南路站—南浦大桥站区间隧道)为背景,采用了公式推导、软土流变试验、有限元数值方法等技术手段,主要研究内容如... 针对当今预测盾构隧道施工引起地表及土层变形所存在的一些问题,以上海市重大工程项目——上海轨道交通明珠线二期工程(浦东南路站—南浦大桥站区间隧道)为背景,采用了公式推导、软土流变试验、有限元数值方法等技术手段,主要研究内容如下: (1) 通过 Laplace 变换及其逆变换等数学手段推导出一些串联流变模型和并联流变模型的本构微分方程，由此证明了其中的许多模型之间存在着相互等效的关系，为方便应用，罗列出了一些等效模型之间的参数对应关系。岩土材料所表现出来的基本力学特性，如弹性、粘性、弹粘性、粘塑性等均可由 Bingham 模型演化而来，而层叠模型的基本叠层是 Bingham 模型，在此基础上，研究了层叠模型演化为其他流变模型的原理。在此研究的基础上说明了层叠模型具有强大的包含性，即它可包含常见的各种岩土本构模型，这为解决岩土流变本构模型的辩识及其工程应用过程中所存在的一些问题提供了新的思路。根据层叠模型的有限元编程原理，利用 Visual Fortran 语言编制了其相应的有限元计算程序，通过一个实例演算对所编制的程序进行了验证。 (2) 在所做的室内三轴流变试验和具有强大包含性的层叠模型基础上，利用非线性位移反分析法对上海软土进行了本构模型辩识，由此可以得出， 展开更多

关键词 隧道工程 软土 位移反分析 盾构隧道 层叠模型 流变试验 包含性 沉降 弹性抗力约束 盾尾空隙 位移 关联 模型辩识 有限元

下载PDF 职称材料

软土流变试验的数值模拟 被引量：14

19

作者 冯紫良 范厚彬 《同济大学学报（自然科学版）》 EI CAS CSCD 北大核心 2003年第4期379-382,共4页

首先讨论了在进行软土工程数值模拟时选取软土流变本构模型的原则 ,然后根据实验室的试验数据提出了一种层叠式的流变模型 ,并利用位移反分析方法求得了土样的有关参数 .由于在进行位移反分析时 ,采用了非线性优化方法 ,为此通过目标函... 首先讨论了在进行软土工程数值模拟时选取软土流变本构模型的原则 ,然后根据实验室的试验数据提出了一种层叠式的流变模型 ,并利用位移反分析方法求得了土样的有关参数 .由于在进行位移反分析时 ,采用了非线性优化方法 ,为此通过目标函数随各个参数变化的影响分析来确定各设计变量的初始值 .计算实例表明 。 展开更多

关键词 软土 层叠流变模型 粘弹塑性 位移反分析 优化方法

下载PDF 职称材料

基于计算力矩结构的并联机器人层叠小脑模型补偿控制研究 被引量：5

20

作者 李世敬 王解法 冯祖仁 《西安交通大学学报》 EI CAS CSCD 北大核心 2003年第6期569-572,共4页

提出了一种新的不确定机器人跟踪控制策略.在计算力矩结构的基础上引入一个层叠小脑模型(CMAC)补偿控制项,利用层叠结构CMAC分层学习的特性调整网络泛化和逼近能力,并从理论上分析了网络的收敛性.为了确保系统误差一致最终有界收敛,分... 提出了一种新的不确定机器人跟踪控制策略.在计算力矩结构的基础上引入一个层叠小脑模型(CMAC)补偿控制项,利用层叠结构CMAC分层学习的特性调整网络泛化和逼近能力,并从理论上分析了网络的收敛性.为了确保系统误差一致最终有界收敛,分别设计了粗/细子网的权值更新律.最后,在网络学习稳定的基础上,采用自适应鲁棒项抵消网络最终学习误差.与传统计算力矩法相比,在不要求加速度测量和惯性矩阵求逆的情况下,算法给出清晰的跟踪误差收敛域.基于6自由度并联机器人的仿真实例验证了算法的有效性. 展开更多

关键词 计算力矩 层叠小脑模型 一致最终有界 并联机器人

下载PDF 职称材料