【Hadoop】Win7上搭建Hadoop开发环境,方法一

在Win7上,编写hadoop程序

 

操作系统:win7

hadoop版本:CDH3u6

 

1、下载安装JDK,以及Eclipse

2、新建JAVA Project

3、去cloudera网站下载hadoop的CDH3u6版本。将起解压到win7的某个目录

4、选中OperateHDFS,右击,选择“property”,弹出右侧的窗口;

    选择“Java Build Path” —— “Libraries” —— Add External Jars

 

5、到上面的画面后,下面就是选择开发hadoop程序时,用到的一些jar包

    将lib文件夹下的所有的jar包,添加进去;将红框内的jar包,安装进去。

6、创建配置文件夹

7、将core-site.xml,hdfs-site.xml,mapred-site.xml放入到此文件夹中。

 

 

8、右键->属性 进行如下操作,添加刚刚创建conf文件夹

 

 

配置搞定!

写代码的过程中要写入的namenodejobtracker地址(修改为你自己的)

在你的代码中,加入如下代码就可以了

Configuration conf = new Configuration();
conf.set("fs.default.name","192.1.1.2:9000");
conf.set("mapred.job.tracker","192.1.1.2:9001");

 

去博客园浏览:http://www.cnblogs.com/laov/p/3497889.html

 

posted @   大牛笔记  阅读(18439)  评论(0编辑  收藏  举报
编辑推荐:
· 如何编写易于单元测试的代码
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
阅读排行:
· 10年+ .NET Coder 心语 ── 封装的思维:从隐藏、稳定开始理解其本质意义
· 地球OL攻略 —— 某应届生求职总结
· 提示词工程——AI应用必不可少的技术
· Open-Sora 2.0 重磅开源!
· 周边上新:园子的第一款马克杯温暖上架
点击右上角即可分享
微信分享提示