2018年3月22日
hadoop MapReduce
摘要： 本质思想：分而治之，一个大任务分成多个小的子任务（map）,并行执行后，合并结果。（reduce） MapReduce运行流程 JobTracker:作业的管理者 将作业分解成一堆任务（MapTask和ReduceTask），分配给TaskTracker运行， 作业的监控，容错处理，在一定时间间隔内 阅读全文
posted @ 2018-03-22 20:00 家迪的家 阅读(174) 评论(0) 推荐(0) 编辑
hadoop文件配置
摘要： 伪分布式配置： core-site.xml hdfs-site.xml mapred-site.xml (可能需要重命名mapred-site.xml.template) yarn-site.xml 初始化 启动 查看 打开Hadoop Resource-Manager Web界面 http://l 阅读全文
posted @ 2018-03-22 09:34 家迪的家 阅读(328) 评论(0) 推荐(0) 编辑