2017年7月10日
Hadoop Webhdfs
摘要： webhdfs：使用http协议访问HDFS 一、需要配置项： 1、编辑httpfs-env.sh，设置webdfs访问端口 2、编辑core-site.xml，设置代理主机 3、编辑hdfs-site.xml 二、重启并访问webhdfs 1、重启NameNode，执行httpfs.sh star 阅读全文
posted @ 2017-07-10 10:58 fee先生 阅读(4526) 评论(1) 推荐(0) 编辑
Hadoop HDFS的Java操作
摘要： package com.test.hdfs; import java.io.IOException; import java.io.OutputStream; import java.net.URI; import java.net.URISyntaxException; import java.util.Iterator; import org.apache.hadoop.conf.Con... 阅读全文
posted @ 2017-07-10 10:45 fee先生 阅读(367) 评论(0) 推荐(0) 编辑
Hadoop JobHistory
摘要： JobHistory用来记录已经finished的mapreduce运行日志，日志信息存放于HDFS目录中，默认情况下没有开启此功能，需要在mapred-site.xml中配置并手动启动。 1、mapred-site.xml配置信息： 2、启动 jobhistory server [xfvm@xfv 阅读全文
posted @ 2017-07-10 10:37 fee先生 阅读(3427) 评论(0) 推荐(0) 编辑