装裱字画步骤:Hadoop MapReduce 学习 -
来源:百度文库 编辑:九乡新闻网 时间:2024/05/03 06:59:45
Hadoop MapReduce 学习
MapReduce1. Map: (K, V) -> (K', V')
2. 合并相同K'值的项
(K', V') -> (K', V' *)
3. Reduce
(K', V'*) -> 新的(K,V)
Hadoop实现自动的 Fail-over, Redistribute M/R tasks
Hadoop为Master/Slave结构
1 Master ( Job Tracker) / M Slave (Task Tracker)
HDFS
文件分成固定块大小,“Write Once", 只能有一个写
HDFS也是Master/Salve结构
1 NameNode / N DataNode
其他相关资源:
Distributed Systems课程 http://www.cs.brandeis.edu/~cs147a/
对HBase的评测: www.cs.duke.edu/~kcd/hadoop/
Cloud9: A library for Hadoop http://www.umiacs.umd.edu/~jimmylin/cloud9/umd-hadoop-dist/cloud9-docs/index.html
Cloud Computing课程: http://www.umiacs.umd.edu/~jimmylin/cloud-computing/index.html
UCSD的Network Services课程: http://www-cse.ucsd.edu/classes/fa07/cse124/assignments.html
Virginia的入门课 http://www.cs.virginia.edu/~cbs6n/hadoop/
Hadoop的监控 http://www.x-trace.net/wiki/doku.php
Scaling up Hadoop (超强,改善Hadoop) http://www.cs.washington.edu/homes/ak/clusterworkshop/slides/YahooHadoopDISC08.pdf
(此人开了咨询公司 http://www.spinnakerlabs.com/ )
Washington的课程 http://www.cs.washington.edu/education/courses/cse490h/07sp/index.html
Distributed Systems课程 http://www.cs.williams.edu/~jeannie/cs339/index.html
http://pages.cs.wisc.edu/~dusseau/Classes/CS739/index.html
Parrallel Processing http://www.cs.colostate.edu/~cs575dl/
分类: hadoop
Hadoop MapReduce 学习 -
Next Generation of Apache Hadoop MapReduce – ...
Hadoop学习笔记二 安装部署 - Alive - 博客园
Mongodb Mapreduce 初窥
MapReduce 中文版论文 ? 人云亦云
Mongodb Mapreduce 初窥
MapReduce源码分析总结
streaming实现mapreduce
MongoDB: 10. MapReduce
基于MongoDB MapReduce的统计分析
hadoop中HDFS详解
Hadoop Job Tuning
Hadoop快速入门
hadoop分布式系统(上)
如何远程调试Hadoop代码
Installing hadoop development cluster on Wind...
Hadoop: Best Practices and Anti-Patter...
在云中使用 MapReduce 和负载平衡 2
百度Hadoop分布式系统揭秘:4000节点集群 : NoSQLfan
Hadoop分布式文件系统:架构和设计要点 - 庄周梦蝶 - BlogJava
Ubuntu_10.04下Hadoop-0.20.2集群配置手册x
Hadoop配置和使用问题记录 - 博客文库 - 博客园
Yahoo旧将工程师 欲用Hadoop山寨Google_LinuxEden-Linux伊甸...
Hadoop Hbase适合存储哪类数据?(转)