摘要
提出一种基于大规模廉价计算平台的海量数据处理模型,吸取了Map/Reduce计算模式和大规模分布式数据存储机制Bigtable的基本思想,实现了以数据为中心的计算密集型的经济性超级计算系统平台。系统选择电信部门的大规模业务数据为分析对象,对电信通话和数据业务的大规模数据集进行处理,从而向运营商和普通用户提供有价值的数据分析服务。该平台适用于其他多种海量数据的分布式处理,为其他的各种应用提供了一个具有良好参考价值的示范。
This paper proposed a new mass data processing model based on large-scale low-cost computing platform,drawing on the basic idea of Map/Reduce the distributed computing model and Bigtable the large-scale data storage mechanism to achieve a data-center and computing-intensive economy supercomputing system platform.The system chose the business data of telecommunications as its analysis object,processing the large data sets of voice and data services.The system is suitable for processing other kinds of mass data,which provides valuable analysis services for telecom operators and ordinary users and offers a good reference model to other applications.
出处
《计算机应用研究》
CSCD
北大核心
2012年第2期582-585,共4页
Application Research of Computers
基金
国家"973"计划资助项目(2011CB302903)
国家自然科学基金资助项目(60873231)
高等学校博士学科点专项科研基金资助项目(20093223120001)
江苏省科技支撑计划资助项目(BE2009158)
江苏省高校自然科学研究资助项目(09KJB520010)
信息安全国家重点实验室开放项目(03-01-1)
江苏省自然科学基金资助项目(BK2011754
BK2009426)
江苏高校优势学科建设工程资助项目(yx002001)
中国博士后科学基金资助项目(2011M500095)
江苏省博士后科研资助计划项目(1102103C)
关键词
分布式计算
数据处理
云计算
电信
distributed computing
data processing
cloud computing
telecommunications
