Eclipse开发MR环境搭建

1.jdk环境配置 
   jdk安装后好后配置相关JAVA_HOME环境变量,并将bin目录配置到path 

2. 下载hadoop-2.7.1.tar.gz

解压hadoop-2.7.1.tar.gz到 D:\XXXX\workspace\hadoop-2.7.1

下载地址:http://archive.apache.org/dist/hadoop/common/hadoop-2.7.1/  

3. 下载hadoop2x-eclipse-plugin 
  百度下载hadoop2x-eclipse-plugin开发插件,如果下载的不好用,可以自己编译一个自己目前在用hadoop版本的插件。

自行编译插件可以参考地址:

http://www.cnblogs.com/beststrive/p/8275932.html

4.下载hadoop-common-2.7.1.bin.zip

解压hadoop-common-2.7.1.bin.zip并将hadoop.dll和winutils.exe文件分别放到D:\XXXX\workspace\hadoop-2.7.1\bin 

和C:\Windows\System32目录下

5.拷贝插件到eclipse插件目录下

hadoop-eclipse-plugin-2.6.0.jar拷贝至eclipse的plugins目录下,然后重启eclipse 

6.设置Hadoop目录

打开菜单Window--Preference--Hadoop Map/Reduce进行配置hadoop目录,如下图所示:

7.配置hadoop视图

显示Hadoop连接配置窗口:Window--Show View--Other-MapReduce Tools,如下图所示: 

8.配置连接Hadoop

查看是否连接成功,能看到如下信息,这种表示连接失败(因为刚把集群关掉),如果连接成功,会显示目录信息。 

9.配置hadoop环境变量

添加环境变量HADOOP_HOME=D:\XXX\workspace\hadoop-2.7.1
追加环境变量path内容:%HADOOP_HOME%/bin

 

posted @ 2018-01-12 15:43  人不疯狂枉一生  阅读(203)  评论(0编辑  收藏  举报