基于云平台的分布式PCA算法在煤炭图像处理中的研究与实现

下载PDF

导出

摘要 PCA算法能够有效地将高维数据投影到较低维空间,应用在各种高维数据的处理中。在煤炭系统中,随着数字时代的高速发展,煤炭数据不仅从维度方面快速增长,而且数据的规模也呈现指数级增长。传统的PCA算法不能有效地处理海量规模煤炭数据。本文针对大规模煤炭数据,提出了分布式PCA算法,该算法基于现有流行的Map Reduce分布式计算框架,能够快速、有效地完成PCA数据分析工作。通过大量的实验结果进一步证明了本文提出的算法具有很高的效率以及很好的可扩展性。

作者周蓉

机构地区四川职业技术学院

出处《福建电脑》 2015年第11期32-33,共2页 Journal of Fujian Computer

基金四川省级教育厅科研项目(编号:13ZA0035)

关键词云计算 PCA 分布式 MAP REDUCE 大规模数据

分类号 TP391.41 [自动化与计算机技术—计算机应用技术]

引文网络
相关文献

参考文献7

1尹飞,冯大政.基于PCA算法的人脸识别[J].计算机技术与发展,2008,18(10):31-33. 被引量：42
2王松,夏绍玮.一种鲁棒主成分分析(PCA)算法[J].系统工程理论与实践,1998,18(1):9-13. 被引量：26
3张媛,张燕平.一种PCA算法及其应用[J].微机发展,2005,15(2):67-68. 被引量：21
4Plumbley, Mark D., and Erkki Oja. "A" normegative PCA" algorithm for independent component analysis." IEEE Transactions on Neural Net- works 15.1 (2004): 66-76. 被引量：1
5Dean, Jeffrey, and Sanjay Ghemawat. "MapReduce: simplified data processing on large clusters." Communications of the ACM 51.1 (2008): 107-113. 被引量：1
6Borthakur, Dhruba. "The hadoop distributed file system: Architecture and design." Hadoop Project Website 11 (2007): 21. 被引量：1
7王爱民.基于PCA与BP神经网络的信息流失预测模型分析[J].煤炭技术,2012,31(8):214-216. 被引量：1

二级参考文献15

1张媛,张燕平.一种PCA算法及其应用[J].微机发展,2005,15(2):67-68. 被引量：21
2韩柯,朱秀昌.基于二维PCA的人脸识别方法研究[J].杭州电子科技大学学报（自然科学版）,2007,27(1):69-72. 被引量：7
3苑玮琦,于清澄.一种基于改进主成分分析的人脸识别方法[J].激光与红外,2007,37(5):478-480. 被引量：12
4Jose C. A Fast On - line Algorithm for PCA and Its Convergence Characteristics[J ]. IEEE, Transactions on Neural Network ,2000,4(2) :299 - 307. 被引量：1
5Jabri M. Robust Principle Component Analysis[J]. IEEE,Transactions on Neural Network, 2000,1 (1) : 289 - 298. 被引量：1
6Wcmg A S Y. A Unified Sequential Method for PCA [ J ].IEEE, Transactions on Neural Network, 1998,9 (2) : 583 -586. 被引量：1
7Lu Congde. Adaptive Robust kernel Algorithm [ J ]. IEEE,Transactions on Neural Network,2003,3(3) :621 - 624. 被引量：1
8张志涌.精通MATLAB6[M].北京:北京航空航天大学出版社,2003,5.. 被引量：21
9Xu Lei，IEEE Trans Neural Netw，1995年，6卷，1期，131页被引量：1
10夏绍玮，系统工程概论，1995年，73页被引量：1

共引文献86

1张子卓,李慧.基于主成分分析法的农网特征指标体系构建[J].产业与科技论坛,2021(2):41-43. 被引量：2
2刘严,张秋香.基于PCA-BP神经网络的精馏塔产品组成软测量模型[J].化工进展,2007,26(z1):98-101.
3宋怀波,史建强.应用PCA理论进行多人脸姿态估计的方法[J].吉林大学学报（工学版）,2013,43(S1):43-46. 被引量：3
4宋哲,刘涛,刘伟,朱鸣华,王晓钢.抗原肽与MHC分子相互作用的QSAR模型研究[J].物理化学学报,2007,23(2):198-205. 被引量：9
5郭宾,戴仁科.代谢组学及其研究策略和分析方法进展[J].中国卫生检验杂志,2007,17(3):554-563. 被引量：34
6尹飞,冯大政.基于PCA算法的人脸识别[J].计算机技术与发展,2008,18(10):31-33. 被引量：42
7杜智斌,夏又新.基于RgPCA的表情特征提取与选择[J].电脑知识与技术,2009,5(4):2693-2695.
8庞珊珊,熊建设.人脸识别技术和算法综述[J].中国新技术新产品,2009(11):14-14. 被引量：4
9孙瑶瑶,刘杰.基于Embedded MATLAB函数模块的图像相似度的实现[J].计算机与数字工程,2010,38(2):22-24. 被引量：2
10邢昊,王浩全,杜宇慧.基于K-L变换的PCA多模医学图象融合算法研究[J].微计算机信息,2010(14):202-203. 被引量：1

1刘冬梅.煤炭系统“千年虫”问题的现状及对策[J].煤炭科技,1999,20(2):6-8.
2吴海君.煤炭企业网络安全建设和管理初探[J].信息安全与通信保密,2007,29(11):92-94. 被引量：3
3崔谦,徐德,孙同景.PLC在压滤机电气控制系统中的应用[J].电气传动自动化,2001(2):50-51. 被引量：3
4朱永红.网络化智能传感技术及在煤炭系统的应用[J].科技风,2010(24). 被引量：1
5孙景斌,祝仁涛.电子汽车衡的局域网应用[J].企业标准化,2005(6):45-45.
6罗莉.云平台下的基于项目的KNN协同过滤算法在煤炭系统中的研究与应用[J].煤炭技术,2013,32(5):193-195.
7侯俐,焦锏,张传博.煤炭系统多媒体教学课件的设计[J].煤炭技术,2010,29(5):204-205. 被引量：2
8张旭.基于Mapreduce协同理论的煤炭营销数据分析技术的研究与实现[J].煤炭技术,2013,32(11):317-319.
9侯贵宾.港口煤炭生产管理可视化集成平台[J].中国港口,2013(8):59-60. 被引量：2
10王浩亮,王丽莉.基于成本代价的分布式逻辑回归算法在煤炭系统中的研究与应用[J].煤炭技术,2013,32(8):205-207.

福建电脑

2015年第11期

浏览历史

内容加载中请稍等...

基于云平台的分布式PCA算法在煤炭图像处理中的研究与实现

参考文献7

二级参考文献15

共引文献86

相关作者

相关机构

相关主题

浏览历史