随笔分类 -  Hadoop

摘要:本文解释了ApplicationMaster启动container并与其通信的机制. 阅读全文
posted @ 2012-11-24 13:53 南国故人(Wall) 阅读(3289) 评论(0) 推荐(0) 编辑
摘要:本文解释了Yarn的客户端为何即可以向RM, 又可以向Jobtracker或本地提交作业; 并且老版本的mapreduce作业不需要任何修改即可使用yarn客户端提交. 阅读全文
posted @ 2012-11-24 12:48 南国故人(Wall) 阅读(2161) 评论(0) 推荐(0) 编辑
摘要:本文主要分析了hadoop客户端read和write block的流程. 以及client和datanode通信的协议, 数据流格式等. 阅读全文
posted @ 2012-11-20 13:27 南国故人(Wall) 阅读(2509) 评论(0) 推荐(1) 编辑
摘要:介绍了 hadoop Capacity Scheduler 的使用方法 阅读全文
posted @ 2012-11-20 12:01 南国故人(Wall) 阅读(2063) 评论(0) 推荐(1) 编辑