07 2017 档案

调试 Hadoop 源代码
摘要：环境是 64bit Ubuntu 14.04 系统, jdk 1.7 以及 Eclipse Mars (4.5) 这里介绍两种调试 Hadoop 源代码的方法: 利用 Eclipse 远程调试工具和打印调试日志. 这两种方法均可以调试伪分布式工作模式和完全分布式工作模式下的 Hadoop. 最后介绍 阅读全文
posted @ 2017-07-04 11:26 秦时明月0515 阅读(2689) 评论(0) 推荐(0) 编辑
Hadoop Shell 介绍
摘要：以 hadoop 2.7.3 为例 bin 目录下是最基础的集群管理脚本, 用户可通过该脚本完成各种功能, 如 HDFS 管理, MapReduce 作业管理等. 作为入门, 先介绍bin 目录下的 hadoop 脚本的使用方法, 如下所示: 参考 官网的 Hadoop 命令参考 hadoop 对应 阅读全文
posted @ 2017-07-03 22:01 秦时明月0515 阅读(711) 评论(0) 推荐(0) 编辑
Hadoop 源代码组织结构
摘要：Hadoop 2.X 包括 编译好的可以直接部署的文件hadoop-{VERSION}.tar.gz; 还有源代码文件hadoop-{VERSION}-src.tar.gz , 需要 Maven 编译后才能进行部署安装. 我以 hadoop 2.7.3 为例. 1. 在Hadoop 的JAR 压缩包 阅读全文
posted @ 2017-07-01 10:33 秦时明月0515 阅读(649) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示