何石-博客 - 博客园

2016年8月23日

摘要： 1、jar包下载地址： http://cn.jarfire.org/ 2、google查询地址 https://www.laiguge.com/ 阅读全文

posted @ 2016-08-23 13:30 何石-博客阅读(152) 评论(0) 推荐(0) 编辑

Hadoop集群安装配置教程_Hadoop2.6.0_Ubuntu/CentOS

摘要：本教程讲述如何配置 Hadoop 集群，默认读者已经掌握了 Hadoop 的单机伪分布式配置，否则请先查看Hadoop安装教程_单机/伪分布式配置或 CentOS安装Hadoop_单机/伪分布式配置。本教程适合于原生 Hadoop 2，包括 Hadoop 2.6.0, Hadoop 2.7.1 阅读全文

posted @ 2016-08-23 09:45 何石-博客阅读(1743) 评论(0) 推荐(0) 编辑

2016年8月22日

Hadoop安装教程_单机/伪分布式配置_Hadoop2.6.0/Ubuntu14.04

摘要：当开始着手实践 Hadoop 时，安装 Hadoop 往往会成为新手的一道门槛。尽管安装其实很简单，书上有写到，官方网站也有 Hadoop 安装配置教程，但由于对 Linux 环境不熟悉，书上跟官网上简略的安装步骤新手往往 Hold 不住。加上网上不少教程也甚是坑，导致新手折腾老几天愣是没装好，很是阅读全文

posted @ 2016-08-22 19:55 何石-博客阅读(6446) 评论(0) 推荐(0) 编辑

2016年8月20日

MapReduce原理

摘要： MapReduce运行流程 MapReduce容错机制阅读全文

posted @ 2016-08-20 14:35 何石-博客阅读(294) 评论(0) 推荐(0) 编辑

HDFS特点

摘要：阅读全文

posted @ 2016-08-20 14:23 何石-博客阅读(389) 评论(0) 推荐(0) 编辑

HDFS文件读写流程

摘要： 1、HDFS文件读取流程： 2、HDFS写入文件流程阅读全文

posted @ 2016-08-20 14:16 何石-博客阅读(310) 评论(0) 推荐(0) 编辑

hadoop基础学习---数据管理策略

摘要：上图中的ABCDE都代表默认大小64M的数据块 nameNode与dataNode之间有一个心跳机制，datanode每隔多秒钟定期的发送心跳到nameNode 阅读全文

posted @ 2016-08-20 14:09 何石-博客阅读(245) 评论(0) 推荐(0) 编辑

hadoop基础学习---基本概念

摘要： 1、组成部分HDFS和MapReduce 2、HDFS这几架构阅读全文

posted @ 2016-08-20 13:41 何石-博客阅读(241) 评论(0) 推荐(0) 编辑

hadoop配置

摘要：第一步：进入conf文件夹下，红框中的4个文件是需要修改的问价第二步：修改hadoop.env.sh 修改javaHome为真实路径，并删除前面的#号第三步：修改core-site.xml 在<configuration> </configuration> 中添加相应配置值第四步：修改hdfs 阅读全文

posted @ 2016-08-20 13:22 何石-博客阅读(200) 评论(0) 推荐(0) 编辑

linux配置java环境

摘要：第一步： vim /etc/profile 第二步：添加以下4行第三步：使配置生效 source /etc/profile 结束配置阅读全文

posted @ 2016-08-20 13:00 何石-博客阅读(248) 评论(0) 推荐(0) 编辑