摘要: 仅做记录 >官方说明:http://hadoop.apache.org/docs/r3.0.0-alpha2/index.html 1. JDK版本的最低依赖从1.7变成了1.8 2. HDFS支持Erasure Encoding 3. Timeline Server v2版本 4. hadoop- 阅读全文
posted @ 2017-02-27 17:33 liuming_1992 阅读(1857) 评论(0) 推荐(0) 编辑
摘要: 这里仅介绍一种Hadoop3.0.x版本的源码编译方式 编译过程 1. 下载源码 2. 安装依赖环境 3. 源码编译 一、下载源码 直接从apache的归档网站中下载对应版本的源码,比如需要下载的hadoop-3.0.0-alpha2的地址为http://archive.apache.org/dis 阅读全文
posted @ 2017-02-27 17:01 liuming_1992 阅读(4272) 评论(0) 推荐(0) 编辑
摘要: 在编译hadoop的过程中,遇到缺少cmake命令的异常,异常信息为:Cannot run program "cmake" (in directory "/opt/workspaces/hadoop-3.0.0-alpha2-src/hadoop-common-project/hadoop-comm 阅读全文
posted @ 2017-02-27 15:32 liuming_1992 阅读(1406) 评论(0) 推荐(0) 编辑
摘要: Hadoop从2.x版本开始,底层的RPC远程调用使用ProtocolBuffer格式来传递数据,所以在编译Hadoop的过程中有可能出现提示缺少Protocol服务的异常信息,类似:'protoc --version' did not return a version,具体异常如下: 解决方案即安 阅读全文
posted @ 2017-02-27 15:12 liuming_1992 阅读(2290) 评论(0) 推荐(0) 编辑