摘要: 1.常用的一些Shell再好的博客,都不如官方文档好用:http://hadoop.apache.org/docs/r1.0.4/cn/hdfs_shell.html 阅读全文
posted @ 2014-12-02 18:44 就像你一样回不来 阅读(131) 评论(0) 推荐(0) 编辑
摘要: 错误:Error Recovery for block null bad datenode[0] nodes==null ...... copyFromLocal:java.io.IOException:File...could only be replicated to 0 nodes,inste... 阅读全文
posted @ 2014-12-02 14:01 就像你一样回不来 阅读(204) 评论(0) 推荐(0) 编辑
摘要: 在用foreach的时候,出现以下错误:错误:Syntax error, 'for each' statements are only available if source level is 5.0解决方法:1.查看安装JDK的版本,发现是1.8版本,jdk安装没有问题2.查看一下eclipse,... 阅读全文
posted @ 2014-12-01 17:56 就像你一样回不来 阅读(580) 评论(0) 推荐(0) 编辑
摘要: 一、NFS简介 NFS就是Network FileSystem的缩写,最早之前是由Sun公司所发展出来的。他最大的功能就是可以透过网络,让不同的机器、不同的操作系统可以彼此分享个别档案(share file)。这个NFS Server可以让你的PC来讲网络远程的NFS主机分享的目录,挂载到本地端的机... 阅读全文
posted @ 2014-12-01 10:10 就像你一样回不来 阅读(1475) 评论(0) 推荐(0) 编辑
摘要: 1.提出问题 在上篇博文中,提到了为什么要配置ssh免密码登录,说是Hadoop控制脚本依赖SSH来执行针对整个集群的操作,那么Hadoop中控制脚本都是什么东西呢?具体是如何通过SSH来针对整个集群的操作?网上完全分布模式下Hadoop的搭建很多,可是看完后,真的了解吗?为什么要配置Hadoop下... 阅读全文
posted @ 2014-11-30 18:34 就像你一样回不来 阅读(542) 评论(0) 推荐(0) 编辑
摘要: 1.Hadoop中为什么要配置免密码登录最近在学习Hadoop,在集群中,Hadoop控制脚本依赖SSH来执行针对整个集群的操作。例如,某个脚本能够终止并重启集群中的所有守护进程。所以,需要安装SSH,但是,SSH远程登陆的时候,需要密码验证,集群中数千台计算机,数千台计算机都需要手工输入密码,这是... 阅读全文
posted @ 2014-11-30 18:24 就像你一样回不来 阅读(8698) 评论(0) 推荐(0) 编辑
摘要: 以前一直是在新浪博客中,今天把换到这里来了,愿我们共同进步!! 阅读全文
posted @ 2014-11-30 17:46 就像你一样回不来 阅读(101) 评论(0) 推荐(0) 编辑
摘要: 1.下载JDK1.8 http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html 有两种格式,一种是tar.gz,一种是rpm,我用的是tar.gz格式的,jdk-8u25-linux-x64... 阅读全文
posted @ 2014-11-30 17:44 就像你一样回不来 阅读(991) 评论(0) 推荐(0) 编辑