2 安装JDK
摘要：
JDK下载路径http://www.oracle.com/technetwork/java/javase/downloads/index.html Hadoop源码包下载http://mirror.bit.edu.cn/apache/hadoop/common安装之前检查是否有java环境 1进入如 阅读全文
posted @ 2019-07-19 15:59 农夫三拳有點疼 阅读(9) 评论(0) 推荐(0) 编辑
3 hadoop集群环境搭建
摘要：
http://archive.apache.org/dist/ 1目前为止 然后为了避免路由网络传输出现问题 >集群机器关闭防火墙 清空系统防火墙iptables -Liptables -F 保存防火墙配置service iptables save 如果上述命令执行失败报出：The service 阅读全文
posted @ 2019-07-19 15:57 农夫三拳有點疼 阅读(7) 评论(0) 推荐(0) 编辑
4 HDFS概念及命令
摘要：
1 HDFS基本思想 1.1 早期文件服务器 从上图中，我们可以看出，存储一个文件，我们一直往一个机子上面存是不够的，那么我们在储存量不够的时候就会加机子。但是如果一个文件放在一台机子上，如果该机器挂了，那么文件就丢失了，不安全。所以我们会把一个文件放在多台机子上，创建一个索引文件来储存文件的指针， 阅读全文
posted @ 2019-07-19 15:56 农夫三拳有點疼 阅读(11) 评论(0) 推荐(0) 编辑
5 HDFS--JavaAPI
摘要：
hdfs在生产应用中主要是客户端的开发，其核心步骤是从hdfs提供的api中构造一个HDFS的访问客户端对象，然后通过该客户端对象操作（增删改查）HDFS上的文件 1 搭建maven开发环境 pom.xml参考 <dependency> <groupId>org.apache.hadoop</gro 阅读全文
posted @ 2019-07-19 15:55 农夫三拳有點疼 阅读(24) 评论(0) 推荐(0) 编辑