基于MapReduce模式的大数据分布式计算态势分析 被引量：4

1

作者 郑钤 《通讯世界》 2018年第6期102-104,共3页

分布式计算技术的发展导致互联网中积聚了一定的信息,如何对这些一定数据展开搜集、筛选以及处理成为一个关键的课题。在此背景下,简单易用的MapReduce已经成为目前专门处理海量数据的、具有高可靠性的、分布式的方式。在大数据背景下,... 分布式计算技术的发展导致互联网中积聚了一定的信息,如何对这些一定数据展开搜集、筛选以及处理成为一个关键的课题。在此背景下,简单易用的MapReduce已经成为目前专门处理海量数据的、具有高可靠性的、分布式的方式。在大数据背景下,本文以MapReduce计算模式的发展态势为研究对象,着重分析了该模式下的国内外研究现状,并且展望了该领域的发展态势。 展开更多

关键词 分布式计算 大数据 MapReduce模式

下载PDF 职称材料

蚂蚁树在文档聚簇中的应用研究

2

作者 向军 陈志华 郑钤 《湖北民族学院学报（自然科学版）》 CAS 2015年第3期297-299,共3页

蚂蚁的自我聚集的行为可以形成蚂蚁聚簇,根据此行为提出一种基于蚂蚁树的文本文件的聚簇算法.算法中将对象属性作为为关键词,提取文本文件关键词组成一个关键词集合,一个集合代表一个对象(蚂蚁).算法将计算关键词的相对频率和对象之间... 蚂蚁的自我聚集的行为可以形成蚂蚁聚簇,根据此行为提出一种基于蚂蚁树的文本文件的聚簇算法.算法中将对象属性作为为关键词,提取文本文件关键词组成一个关键词集合,一个集合代表一个对象(蚂蚁).算法将计算关键词的相对频率和对象之间的相似度,然后比较对象相似度阈值和相异度阈值,最终完成文本文件对象的聚簇. 展开更多

关键词 蚂蚁树 相对频率 相似度 聚簇

下载PDF 职称材料

一种基于负载代价的MapReduce等值连接优化算法

3

作者 郑钤 向军 《湖北民族学院学报（自然科学版）》 CAS 2018年第3期342-347,共6页

MapReduce并行计算模型在大规模分布式数据处理中应用广泛,但该模型不能很好地支持连接操作,特别是面对倾斜数据时,原有的分区算法容易造成处理节点间的负载不均衡。针对这一问题,提出一种基于key代价的负载均衡等值连接算法,对Map端中... MapReduce并行计算模型在大规模分布式数据处理中应用广泛,但该模型不能很好地支持连接操作,特别是面对倾斜数据时,原有的分区算法容易造成处理节点间的负载不均衡。针对这一问题,提出一种基于key代价的负载均衡等值连接算法,对Map端中间结果进行采样,根据采样结果计算每一key值的负载代价,并在此基础上,设计一种动态划分函数,对不同的key值按照负载代价均匀划分到各个计算节点,实现了负载均衡。实验结果表明,在同构集群下,提出的算法在负载均衡方面具有较好的效果. 展开更多

关键词 MAPREDUCE 负载均衡 等值连接 key代价

下载PDF 职称材料

大数据分析下航线动态数据多信道并行调度方法

4

作者 向军 郑钤 《舰船科学技术》 北大核心 2019年第14期34-36,共3页

由于船舶航线数据为动态数据,因此在数据传输方法需要多数据并行同点传输,才能保证数据调度指令的时效性。现有船舶航线调度方法内采用的调度算法,在数据并行处理方面存在数据并行传输延迟滞后,并行节点间冲突点过高,导致调度指令无法... 由于船舶航线数据为动态数据,因此在数据传输方法需要多数据并行同点传输,才能保证数据调度指令的时效性。现有船舶航线调度方法内采用的调度算法,在数据并行处理方面存在数据并行传输延迟滞后,并行节点间冲突点过高,导致调度指令无法保证时效性。针对数据算法的并行逻辑关系,提出大数据分析下航线动态数据多信道并行调度方法分析。首先,采用大数据分析引擎建立动态数据并行冲突分析模型,通过模型得到并行数据传输中的冲突参数;接着引入MAC多层信道并行调度算法,对数据并行冲突参数进行消除计算;最后,通过计算机仿真实验对方提出的方法进行测试,证明方法的有效性与可行性。 展开更多

关键词 大数据 航线 动态数据 多信道并行

下载PDF 职称材料

多源不平衡噪声数据集成冲突消除仿真研究

5

作者 向军 郑钤 《计算机仿真》 北大核心 2019年第10期443-447,共5页

多源数据集成过程中存在相互冲突情况,消除冲突有利于信息共享和提高用户满意度.针对当前数据冲突消除相关研究成果存在查准率与查全率低的问题,提出基于K-半径子图的多源不平衡噪声数据集成冲突消除方法.利用网络侦听技术,通过将路由... 多源数据集成过程中存在相互冲突情况,消除冲突有利于信息共享和提高用户满意度.针对当前数据冲突消除相关研究成果存在查准率与查全率低的问题,提出基于K-半径子图的多源不平衡噪声数据集成冲突消除方法.利用网络侦听技术,通过将路由器与流量识别工作站放置在同一个物理网段中,所有路经路由器的多源数据包均会经过流量识别工作站完成多源数据采集.根据采集所得数据的K-半径子图描述数据上下文信息,并通过数据K-半径子图对比的方式,将数据相似程度与数据上下文相似程度相结合判定数据是否存在冲突.假设不存在冲突,则按一定规则将数据保存下来;假设存在冲突,则将冲突数据消除.实验结果表明,所提方法具有很高地查准率与查全率,整体运行效果良好,可为该领域发展提供强力支撑. 展开更多

关键词 多源 噪声数据 集成 冲突消除

下载PDF 职称材料

贵州峨眉山玄武岩喷发期的岩相古地理研究 被引量：79

6

作者 陈文一 刘家仁 +1 位作者 王中刚 郑启钤 《古地理学报》 CAS CSCD 2003年第1期17-28,共12页

贵州峨眉山玄武岩喷发 ,从动态的角度可以分为茅口期晚期和龙潭期 (吴家坪期 ) ,龙潭期又可分为三个喷发旋回 ,对应于四个不同的岩相古地理环境 ,体现了东吴运动在造成贵州地区地壳抬升、下沉和接受最大海侵之后 ,又上升、拉张、沉陷带... 贵州峨眉山玄武岩喷发 ,从动态的角度可以分为茅口期晚期和龙潭期 (吴家坪期 ) ,龙潭期又可分为三个喷发旋回 ,对应于四个不同的岩相古地理环境 ,体现了东吴运动在造成贵州地区地壳抬升、下沉和接受最大海侵之后 ,又上升、拉张、沉陷带发生地裂 (又称峨眉地裂 )以及地幔物质喷溢等地质活动 ,具间歇性和多旋回性的特点。本文从研究海陆变迁入手 ,揭示峨眉山玄武岩喷发与沉积作用的内在联系 ,进而探讨其与金、锑等矿产的成因联系 ,提出该期各相区与成矿区的形成模式。通过对贵州峨眉山玄武岩不同喷发期岩相古地理的研究可以看出 ,茅口期晚期和龙潭期早期海域的沉积韵律和相带展布格局与玄武岩喷发的间歇性和多旋回性特征完全一致。玄武岩的喷发为成矿提供了物质基础 ,玄武岩喷发的间歇期又为沉积矿产的富集提供了机遇。这种岩浆期后气液以富硅和二氧化碳为特征的玄武岩 ,本身富含铁、锰、铜、铅、锌、锑、砷、汞、金、银、氟、磷以及一些稀散和放射性元素等成矿组分。在喷发过程中 ,气液成分有一定变化 ,各阶段和离岩浆的远近距离不同以及喷发性质和环境差异 ,形成了火山气液矿床、火山沉积矿床和沉积矿床的不同成矿带。 展开更多

关键词 岩相古地理 峨眉山 玄武岩 成矿规律 贵州 沉积矿床 喷发期

下载PDF 职称材料

贵州海西—燕山构造旋回期成矿地质背景研究 被引量：22

7

作者 戴传固 郑启钤 +2 位作者 陈建书 张慧 代雅然 《贵州地质》 2014年第2期82-88,共7页

贵州在海西—燕山构造旋回期同时受东南侧江南复合造山带和西南侧特提斯域的发展演化影响,从晚古生代开始发生陆内裂陷,三叠纪初转化为前陆盆地,燕山运动使贵州进入板内造山阶段,形成前陆盆地典型褶皱样式侏罗山式褶皱和浅层滑脱构造等... 贵州在海西—燕山构造旋回期同时受东南侧江南复合造山带和西南侧特提斯域的发展演化影响,从晚古生代开始发生陆内裂陷,三叠纪初转化为前陆盆地,燕山运动使贵州进入板内造山阶段,形成前陆盆地典型褶皱样式侏罗山式褶皱和浅层滑脱构造等。其裂陷盆地和前陆盆地控制了沉积型、喷流沉积型矿产资源的时空产出,代表性矿种有煤、锰、铝土矿、烃源岩及页岩气等。而以金锑砷汞、铅锌、软玉等内生热液型、沉积改造型矿产明显受浅层滑脱构造、板内岩浆岩控制。由于该时期贵州所处前陆盆地之构造位置,形成了贵州非常有特色的中低温成矿域。 展开更多

关键词 海西-燕山构造旋回期 地质背景 成矿作用 贵州

下载PDF 职称材料

贵州雪峰—加里东构造旋回期成矿地质背景研究 被引量：20

8

作者 戴传固 郑启钤 +2 位作者 陈建书 王敏 张慧 《地学前缘》 EI CAS CSCD 北大核心 2013年第6期219-225,共7页

武陵运动后,雪峰—加里东构造旋回期贵州呈现台地-斜坡-盆地沉积格局,经历了裂陷洋盆至前陆盆地的演化历程,发育不同背景下的岩浆岩组合。广西运动形成加里东期造山带,此时贵州从东向西分别位于造山带内带、外带和前陆位置,区域变质作... 武陵运动后,雪峰—加里东构造旋回期贵州呈现台地-斜坡-盆地沉积格局,经历了裂陷洋盆至前陆盆地的演化历程,发育不同背景下的岩浆岩组合。广西运动形成加里东期造山带,此时贵州从东向西分别位于造山带内带、外带和前陆位置,区域变质作用随之逐渐减弱,同时发育逆冲推覆断层、变质核杂岩构造等。其裂陷洋盆、前陆盆地控制了沉积型、喷流沉积型矿产,代表性矿种有锰、磷、重晶石、镍钼钒、铅锌、烃源岩及页岩气等;而金、铜、铅锌、金刚石等内生热液型、沉积改造型矿产明显受变质核杂岩构造、板内岩浆岩控制。 展开更多

关键词 雪峰—加里东构造旋回期 地质背景 成矿作用 贵州

下载PDF 职称材料

贵州雷公山地区锑矿成矿规律 被引量：14

9

作者 朱霭林 易国贵 +1 位作者 马骥 郑启钤 《贵州地质》 1999年第3期221-232,共12页

讨论了贵州雷公山地区锑矿的成矿背景、矿床地质特征、成矿机理和成矿规律 ,特别详述了不同级次构造对锑矿带、矿田、矿床、矿体的控制作用。指出在江南造山带古隆起区 ,高密度幔源液体分异的热液活动 ,可能形成石英脉型Sb -Au矿或Sb -... 讨论了贵州雷公山地区锑矿的成矿背景、矿床地质特征、成矿机理和成矿规律 ,特别详述了不同级次构造对锑矿带、矿田、矿床、矿体的控制作用。指出在江南造山带古隆起区 ,高密度幔源液体分异的热液活动 ,可能形成石英脉型Sb -Au矿或Sb -多金属矿 ,即与过渡性韧性剪切带有关的蚀变糜棱岩型Au矿或An -多金属矿成矿系列。 展开更多

关键词 过渡性剪切带 断层破碎带 锑矿床 成矿规律

下载PDF 职称材料

梵净山地区镁铁质—超镁铁质侵入岩特征及其意义 被引量：2

10

作者 张慧 王敏 郑启钤 《贵州地质》 2008年第3期161-165,共5页

梵净山地区中元古代地层发育,侵位于其中的镁铁质—超镁铁质岩的岩类齐全、旋回性好,厚度大,是中国南方研究该幔源岩的良好地区,特别对探讨Rodinia超大陆的演化具有重要的科学意义。

关键词 岩石特征 超基性岩-基性岩 梵净山区

下载PDF 职称材料

甲午岁暮读诗有感

11

作者 郑永钤 《老人世界》 2015年第1期42-42,共1页

岁暮梅花发，江山又欲春。吟诗浮大白，追梦念征尘。庾信文章老，少陵风雨贫。肃然歌正气，天地物华新。

关键词 读诗 吟诗 文章

原文传递

[南吕·一枝花]美丽合肥

12

作者 郑永钤 《老人世界》 2014年第8期42-42,共1页

[一枝花] 江南唇齿乡，淮右襟喉地。环城翡翠秀，映日水波奇。美景堪题：教弩听松立，包园戴月归。乘车儿游三国遗城，步辇儿拜中堂故里。

关键词 诗词 文学 文学作品 当代作品

原文传递