摘要: 1. 先进先出(FIFO)调度器 先进先出调度器是Hadoop的默认调度器。就像这个名字所隐含的那样,这种调度器就是用简单按照“先到先得”的算法来调度任务的。例如,作业A和作业B被先后提交。那么在执行作业B的任务前,作业A中的所有map任务都应该已经执行完成。 配置:调度器类型的配置是在mapr... 阅读全文
posted @ 2015-11-02 16:44 ~风轻云淡~ 阅读(2705) 评论(0) 推荐(0) 编辑
摘要: 1. hadoop fs 帮助信息hadoop fs使用help选项可以获得某个具体命令的详细说明:hadoop fs -help ls2. 列出HDFS文件和目录hadoop fs -ls /user/3. 复制文件到HDFS和从HDFS复制文件 在很多方面,HDFS较之于本地0S文件系统更像一... 阅读全文
posted @ 2015-11-02 10:49 ~风轻云淡~ 阅读(2545) 评论(0) 推荐(0) 编辑