南国故人（Wall）

摘要： MAPREDUCE-3451, 把fairScheduler引入到2.0.2-alpha, 本文介绍一下hadoop 2.0.2-alpha的fairscheduler. 包括调度算法和配置方法. 阅读全文

posted @ 2012-12-09 14:37 南国故人（Wall）阅读(3973) 评论(0) 推荐(0) 编辑

摘要：本文介绍了NodeManager的启动流程与服务. 阅读全文

posted @ 2012-11-24 13:59 南国故人（Wall）阅读(3320) 评论(0) 推荐(0) 编辑

摘要：本文解释了ApplicationMaster启动container并与其通信的机制. 阅读全文

posted @ 2012-11-24 13:53 南国故人（Wall）阅读(3288) 评论(0) 推荐(0) 编辑

摘要：本文解释了Yarn的客户端为何即可以向RM, 又可以向Jobtracker或本地提交作业; 并且老版本的mapreduce作业不需要任何修改即可使用yarn客户端提交. 阅读全文

posted @ 2012-11-24 12:48 南国故人（Wall）阅读(2158) 评论(0) 推荐(0) 编辑

摘要：本文主要分析了hadoop客户端read和write block的流程. 以及client和datanode通信的协议, 数据流格式等. 阅读全文

posted @ 2012-11-20 13:27 南国故人（Wall）阅读(2507) 评论(0) 推荐(1) 编辑

摘要：介绍了 hadoop Capacity Scheduler 的使用方法阅读全文

posted @ 2012-11-20 12:01 南国故人（Wall）阅读(2062) 评论(0) 推荐(1) 编辑

南国故人