本文已被:浏览 1219次 下载 564次
投稿时间:2010-07-12
投稿时间:2010-07-12
中文摘要: 介绍了Hadoop架构的主要构成,通过一个实例详细阐述了Hadoop架构的MapReduce实现机制;开发了一个基于Hadoop架构职工工资统计应用实例,并根据该实例分析了其在单节点模式、伪分布模式和完全分布模式应用中的运行效率.
中文关键词: Hadoop架构 MapReduce机制 分布式文件系统
Abstract:The key components of Hadoop are introduced first,then the MapReduce implementation mechanism is analyzed.What is more important,an application for statistics of employee salary is developed and the efficiency comparison is given in the three different applications,namely,the single node model,pseudo-distribution model and the full distribution model.
文章编号:20110117 中图分类号: 文献标志码:
基金项目:
作者 | 单位 | |
田秀霞 | 上海电力学院 计算机与信息工程学院, 上海 200090 | tianxxsmile@yahoo.com.cn. |
周耀君 | 上海电力学院 计算机与信息工程学院, 上海 200090 | |
毕忠勤 | 上海电力学院 计算机与信息工程学院, 上海 200090 | |
彭源 | 上海电力学院 计算机与信息工程学院, 上海 200090 |
引用文本:
田秀霞,周耀君,毕忠勤,等.基于Hadoop架构的分布式计算和存储技术及其应用[J].上海电力大学学报,2011,27(1):70-74.
TIAN Xiu-xia,ZHOU Yao-jun,BI Zhong-qin,et al.The Technology and Application of Distributed Computing and Storage Based on Hadoop Architecture[J].Journal of Shanghai University of Electric Power,2011,27(1):70-74.
田秀霞,周耀君,毕忠勤,等.基于Hadoop架构的分布式计算和存储技术及其应用[J].上海电力大学学报,2011,27(1):70-74.
TIAN Xiu-xia,ZHOU Yao-jun,BI Zhong-qin,et al.The Technology and Application of Distributed Computing and Storage Based on Hadoop Architecture[J].Journal of Shanghai University of Electric Power,2011,27(1):70-74.