摘要: MapReduce运行流程 MapReduce容错机制 阅读全文
posted @ 2016-08-20 14:35 何石-博客 阅读(294) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2016-08-20 14:23 何石-博客 阅读(389) 评论(0) 推荐(0) 编辑
摘要: 1、HDFS文件读取流程: 2、HDFS写入文件流程 阅读全文
posted @ 2016-08-20 14:16 何石-博客 阅读(310) 评论(0) 推荐(0) 编辑
摘要: 上图中的ABCDE都代表默认大小64M的数据块 nameNode与dataNode之间有一个心跳机制,datanode每隔多秒钟定期的发送心跳到nameNode 阅读全文
posted @ 2016-08-20 14:09 何石-博客 阅读(245) 评论(0) 推荐(0) 编辑
摘要: 1、组成部分HDFS和MapReduce 2、HDFS这几架构 阅读全文
posted @ 2016-08-20 13:41 何石-博客 阅读(241) 评论(0) 推荐(0) 编辑
摘要: 第一步:进入conf文件夹下,红框中的4个文件是需要修改的问价 第二步:修改hadoop.env.sh 修改javaHome为真实路径,并删除前面的#号 第三步:修改core-site.xml 在<configuration> </configuration> 中添加相应配置值 第四步:修改hdfs 阅读全文
posted @ 2016-08-20 13:22 何石-博客 阅读(200) 评论(0) 推荐(0) 编辑
摘要: 第一步: vim /etc/profile 第二步:添加以下4行 第三步:使配置生效 source /etc/profile 结束配置 阅读全文
posted @ 2016-08-20 13:00 何石-博客 阅读(248) 评论(0) 推荐(0) 编辑