2021年7月8日
MapReduce自定义Reducer实现（第二步）
摘要： package com.imooc.bigdata.hadoop.mapreduce.wordcount; import org.apache.hadoop.io.IntWritable; import org.apache.hadoop.io.Text; import org.apache.had 阅读全文
posted @ 2021-07-08 16:11 酱汁怪兽 阅读(115) 评论(0) 推荐(0) 编辑
MapReduce自定义Mapper实现（第一步）
摘要： package com.imooc.bigdata.hadoop.mapreduce.wordcount; import org.apache.hadoop.io.IntWritable; import org.apache.hadoop.io.LongWritable; import org.ap 阅读全文
posted @ 2021-07-08 15:26 酱汁怪兽 阅读(154) 评论(0) 推荐(0) 编辑
MapReduce编程模型
摘要： 1、MapReduce编程模型执行步骤 （1）准备map处理的输入数据 （2）Mapper处理 （3）Shuffle （4）Reduce处理 （5）结果输出 2、图解（同一个作业在不同机制上运行） （1）NameNode执行文件系统名称空间操作，如打开、关闭和重命名文件和目录。它还确定块到数据节点的 阅读全文
posted @ 2021-07-08 14:39 酱汁怪兽 阅读(168) 评论(0) 推荐(0) 编辑