基于Spark与改进K- modes的增量聚类研究 被引量：1

1

作者 郑忠斌 孙繁荣 《信息技术》 2020年第6期50-55,共6页

为改善传统K-modes在无序分类数据聚类中忽略多属性和属性间差异的问题,以及解决算法在高维和动态增量数据聚类的应用,提出基于Spark与改进K-modes增量聚类方法。提出多属性值modes的新相异度度量方法,在保留多属性的同时,引入基于信息... 为改善传统K-modes在无序分类数据聚类中忽略多属性和属性间差异的问题,以及解决算法在高维和动态增量数据聚类的应用,提出基于Spark与改进K-modes增量聚类方法。提出多属性值modes的新相异度度量方法,在保留多属性的同时,引入基于信息熵的属性权重计算方法,以综合考虑不同维度下属性差异;提出基于多原则的迭代方法对聚类中心K进行优选,提高聚类准确率;基于Spark平台,引入增量聚类思想运行改进算法;最后搭建Spark实验环境对提出方法进行验证,结果表明改进K-modes聚类的准确率明显优于传统K-modes算法,且并行化算法在对增量数据执行效率和准确率上也具有明显优势。 展开更多

关键词 Spark计算平台 K-modes算法 相异度度量 信息熵

下载PDF 职称材料

由一种模糊代数上的模糊数值测度确定的不相似度量

2

作者 张忠旺 《东北电力大学学报》 2006年第6期17-21,共5页

给出全有限测度空间(X,,μ)中生成的模糊σ-代数上的模糊数值测度,模糊σ-代数上的不相似度量。对X为有限集的情形,计算了模糊子集间的距离,给出了一种模糊聚类工具。

关键词 模糊聚类 不相似度量 模糊数 模糊数值测度

下载PDF 职称材料

模糊托格森多维标度法

3

作者 吕振伟 《太原大学学报》 2010年第3期129-131,共3页

多维标度法是进行数据挖掘常用的方法之一,这种方法将对象之间复杂的关系用相对简单的点距离表示出来,现在广泛应用于心理学、地质学、环境分析和知识结构分析等众多难以取得准确定量资料的领域。文中提出了相异度的概念,并将其作为一... 多维标度法是进行数据挖掘常用的方法之一,这种方法将对象之间复杂的关系用相对简单的点距离表示出来,现在广泛应用于心理学、地质学、环境分析和知识结构分析等众多难以取得准确定量资料的领域。文中提出了相异度的概念,并将其作为一种非相似度量应用在经典的托格森多维标度法中。 展开更多

关键词 多维标度法 相异度 托格森方法 模糊集

下载PDF 职称材料

图聚类的相异度度量方法研究

4

作者 王小黎 《光盘技术》 2009年第2期38-39,共2页

图是实体及其关系建模的一种常见方法并广泛地运用于Internet,Web结构,社团网络等的结构描述。在面对图中两个邻接结点的度都非常大,而它们连接相同结点的数目极少的问题时,普通聚类方法难以解决。对这一问题,根据图的相异度矩阵计算模... 图是实体及其关系建模的一种常见方法并广泛地运用于Internet,Web结构,社团网络等的结构描述。在面对图中两个邻接结点的度都非常大,而它们连接相同结点的数目极少的问题时,普通聚类方法难以解决。对这一问题,根据图的相异度矩阵计算模型,采用凝聚的层次聚类方法思想,可以进行有效的聚类分析。最后通过实例检验了上述度量标准及聚类算法的正确性和有效性。 展开更多

关键词 相异度 度量 层次聚类方法 模块性

下载PDF 职称材料

船舶水下通信系统中海声信道文本数据聚类方法研究

5

作者 薛潇 《舰船科学技术》 北大核心 2019年第20期115-117,共3页

传统的文本数据聚类方法性能较差,无法得到最优的聚类原型。为了解决这个问题,提出船舶水下通信系统中海声信道文本数据聚类方法研究。首先处理在船舶水下通信系统中选取的海声信道文本数据,在应用聚类定义,分解文本数据相异度矩阵,为... 传统的文本数据聚类方法性能较差,无法得到最优的聚类原型。为了解决这个问题,提出船舶水下通信系统中海声信道文本数据聚类方法研究。首先处理在船舶水下通信系统中选取的海声信道文本数据,在应用聚类定义,分解文本数据相异度矩阵,为统一变量度量值,应用绝对偏差均值公式进行标准化处理,在此基础上,对海声信道文本数据进行聚类,由此,完成海声信道文本数据聚类方法的设计。在实验中,随机选取10组文本数据相异度矩阵,通过对比2种方法的性能,验证所提方法的可行性。实验结果表明,所提方法性能更好,更占优势。 展开更多

关键词 通信系统 海声信道 文本数据 聚类定义 相异度矩阵 度量值

下载PDF 职称材料

基于最大差异选择算法的代表性海况选取

6

作者 王潇晨 郑振钧 +5 位作者 董华韦 李鹏达 吴宇飞 郑艳娜 马小舟 董国海 《水运工程》 2024年第1期1-7,共7页

数值模拟及物理模型试验是研究近岸波浪的重要方法。在实施数值模拟和物理模型试验前,需要根据近岸波浪特征确定入射波浪要素。近岸波浪往往是由混合浪主导的,包含多个独立的波浪系统,每个波系都需用多个波浪特征参数进行描述,因此实现... 数值模拟及物理模型试验是研究近岸波浪的重要方法。在实施数值模拟和物理模型试验前,需要根据近岸波浪特征确定入射波浪要素。近岸波浪往往是由混合浪主导的,包含多个独立的波浪系统,每个波系都需用多个波浪特征参数进行描述,因此实现多波浪系统的代表性海况的选取具有重要意义。首先介绍了数据挖掘算法,随后根据汉班托塔港的实测波浪数据,运用最大差异选择算法(MDA)分别选取了二维、三维以及多维特征参数描述下的代表性波浪条件。结果表明,对于可进行人为筛选的二维波浪特征参数,MDA算法的筛选结果优于人工筛选结果。在三维及多维波浪特征参数条件下,MDA算法选取的代表性海况在数据空间上分布均匀,具有较高的代表性,证实了MDA算法适用于选取混合海况下的代表性波浪特征参数。 展开更多

关键词 最大差异选择算法 波浪观测 代表性海况 混合浪 多波浪系统

下载PDF 职称材料

混合测量子空间聚类算法的研究 被引量：2

7

作者 金利英 赵升吨 《西安交通大学学报》 EI CAS CSCD 北大核心 2018年第3期139-144,167,共7页

针对闵可夫斯基子空间聚类算法对特征权重分配的问题,提出了一种混合测量子空间聚类算法(iMWK-HD),以实现调节特征权重因子和提高算法性能的目的。利用闵可夫斯基距离与余弦相结合的混合测量来分配特征权重,构造新的目标函数;在聚类迭... 针对闵可夫斯基子空间聚类算法对特征权重分配的问题,提出了一种混合测量子空间聚类算法(iMWK-HD),以实现调节特征权重因子和提高算法性能的目的。利用闵可夫斯基距离与余弦相结合的混合测量来分配特征权重,构造新的目标函数;在聚类迭代过程中,采用智能K-means进行初始化来解决选择正确类数的问题;根据新的目标函数,使用拉格朗日乘子法求解新的隶属度和特征权重更新公式,使类中心更加稳定,从而促进特征空间转换,获取数据集最优聚类结果。采用UCI数据集设计了对比实验,实验结果表明,iMWK-HD算法优于iK-means、iWK-means、iMWK-means这3个现有的聚类算法,所提算法能有效提升聚类精确度和聚类结果的稳定性。 展开更多

关键词 闵氏距离 子空间聚类算法 特征权重 混合测量

下载PDF 职称材料

基于Bray-Curtis相异度的冲突度量方法 被引量：1

8

作者 陈洪锋 王欣 《黑龙江大学工程学报》 2022年第2期78-83,共6页

无法准确度量证据间的冲突程度是D-S证据理论存在的一个基本问题。为了有效地解决此问题,基于Bray-Curtis相异度公式,提出了一种新的冲突度量方法,它满足非负性、规范性、对称性、一致性和三角不等式等冲突度量性质,具有计算负担小、度... 无法准确度量证据间的冲突程度是D-S证据理论存在的一个基本问题。为了有效地解决此问题,基于Bray-Curtis相异度公式,提出了一种新的冲突度量方法,它满足非负性、规范性、对称性、一致性和三角不等式等冲突度量性质,具有计算负担小、度量精度高的优点。通过理论证明以及实例仿真验证了所提方法的有效性。 展开更多

关键词 D-S证据理论 Bray-Curtis相异度 冲突度量

下载PDF 职称材料

基于IK-MD-SA聚类算法的电力数据审计疑点研究

9

作者 陈蓉 《价值工程》 2022年第1期174-176,共3页

为解决电力行业海量非结构化数据导致审计疑点数据效率、准确性低的难题,本文提出了一种基于迭代IK-MD-SA聚类电力大数据审计疑点算法。首先运用相异性度量算法通过构造相异性矩阵和计算均值相异性改进K-means聚类算法选择初始聚类中心... 为解决电力行业海量非结构化数据导致审计疑点数据效率、准确性低的难题,本文提出了一种基于迭代IK-MD-SA聚类电力大数据审计疑点算法。首先运用相异性度量算法通过构造相异性矩阵和计算均值相异性改进K-means聚类算法选择初始聚类中心,并将簇均值替换为簇中位数完成后续聚类中心迭代,以消离群点影响聚类结果的准确性。然后利用改进的蜂群算法对聚类结果进行优化,使其保证高运行效率的前提下聚类结果仍具有较高准确性。最后,通过离散性电力数据进行识别潜在疑点试验,验证了所提算法的可行性和有效性。 展开更多

关键词 相异性度量算法 改进蜂群算法 迭代K-means算法 审计疑点

下载PDF 职称材料

测量噪声相关线性系统异类传感器航迹融合 被引量：2

10

作者 张安民 韩崇昭 《电子与信息学报》 EI CSCD 北大核心 2005年第3期471-473,共3页

研究了异类传感器航迹融合问题。在测量噪声相关的条件下,利用线性无偏最小方差估计的基本理论,通过对异类传感器的状态估计采用顺序滤波的方法,得到了相关测量噪声线性系统异类传感器测量融合算法和状态矢量融合算法。计算机数字仿真... 研究了异类传感器航迹融合问题。在测量噪声相关的条件下,利用线性无偏最小方差估计的基本理论,通过对异类传感器的状态估计采用顺序滤波的方法,得到了相关测量噪声线性系统异类传感器测量融合算法和状态矢量融合算法。计算机数字仿真结果表明,由于考虑了测量噪声之间的相关性,该算法比噪声不相关融合算法具有更好的跟踪性能,航迹跟踪的精度得到了改善。 展开更多

关键词 测量噪声相关 异类传感器 线性无偏最小方差估计 状态矢量融合 测量融合

下载PDF 职称材料

一种有效的异质多传感器异步量测融合算法 被引量：1

11

作者 蔡月 王耀康 《现代电子技术》 2008年第14期185-188,共4页

提出一种不同类型传感器异步量测融合算法,即首先将量测方程线性化,再在融合中心通过建立伪量测方程,得到同步化的量测数据,然后利用一种扩维滤波的思想进行融合处理得到全局估计,最后进行仿真分析。结果表明了该算法的有效性。该算法... 提出一种不同类型传感器异步量测融合算法,即首先将量测方程线性化,再在融合中心通过建立伪量测方程,得到同步化的量测数据,然后利用一种扩维滤波的思想进行融合处理得到全局估计,最后进行仿真分析。结果表明了该算法的有效性。该算法体现一种并行处理的思想,故数据处理的速度高,特别适用于异步数据的融合处理。 展开更多

关键词 多传感器 异质 异步融合 伪量测方程

下载PDF 职称材料

异种钢接头焊接残余应力分析及实验研究 被引量：6

12

作者 闵行 赵挺 王能道 《机械强度》 CAS CSCD 北大核心 1997年第2期17-20,共4页

异种钢接头是电站锅炉中的一个重要部件。本文应用热弹塑性有限元对１０２钢和３０４Ｈ钢管通过镍基合金填充材料焊接的异种钢接头的焊接残余应力场及经过退火后的残余应力场进行了数值计算，并应用全释放法对该焊接头进行了实测，计算... 异种钢接头是电站锅炉中的一个重要部件。本文应用热弹塑性有限元对１０２钢和３０４Ｈ钢管通过镍基合金填充材料焊接的异种钢接头的焊接残余应力场及经过退火后的残余应力场进行了数值计算，并应用全释放法对该焊接头进行了实测，计算结果与实测结果基本吻合。这些结果可供异种钢接头失效研究和其焊接工艺的制订时参考。 展开更多

关键词 异种钢管 焊接头 残余应力 数值计算 测试

下载PDF 职称材料

一种任意相关噪声异类传感器测量融合算法 被引量：1

13

作者 张安民 李琦 韩崇昭 《仪器仪表学报》 EI CAS CSCD 北大核心 2006年第5期489-491,496,共4页

基于测量融合理论提出了一种任意相关噪声异类传感器非线性系统目标跟踪算法。该算法在构造跟踪滤波器时,在增益阵中引入了测量噪声与系统噪声相关以及测量噪声之间相关项,增加了描述多传感器融合系统的信息量。仿真结果表明,由于考虑... 基于测量融合理论提出了一种任意相关噪声异类传感器非线性系统目标跟踪算法。该算法在构造跟踪滤波器时,在增益阵中引入了测量噪声与系统噪声相关以及测量噪声之间相关项,增加了描述多传感器融合系统的信息量。仿真结果表明,由于考虑了过程噪声和测量噪声以及测量噪声之间的相关性,测量融合算法比噪声不相关融合算法具有更好的跟踪性能,并且航迹跟踪的精度得到了改善。 展开更多

关键词 任意相关噪声 异类传感器 测量融合 线性无偏最小方差估计

下载PDF 职称材料