hadoop 配置注意
到目前为止,关于配置1.*版本的hadoop书籍占多数,前面配置2.*失败以后照着书籍配置1.2.1成功。
准备工具:(注意用统一位数的,我的64位)
hadoop1.2.1
jdk1.6
xshell
vmware
eclipse3.6(这个版本测试可用,4.4版本测试不可用)
配置需要修改的文件
hadoop-evn.sh -> 设置jdk路径
hdfs-site.xml -> 设置数据副本数量
mapred-site.xml -> 设置JobTracker地址和端口
core-site.xml -> 设置临时目录、HDFS地址和端口
按照一般方法安装完成hadoop分布式以后,可用用xshell访问各个linux,在windows下使用eclipse编写代码连接hadoop。
可以将hadoop1.2.1随便解压到一个目录,eclipse安装完对应版本hadoop插件以后设置这个目录就可以自动导入相应包了。
注意可能会出现权限错误,到网上下载解决权限问题的 hadoop-core-1.2.1.jar 。