摘要: (安装scala的前提是已经安装好了jdk) 1、下载scala的安装包 wget https://scala-lang.org/files/archive/scala-2.11.0-M2.tgz 2、解压缩scala压缩包 tar zxvf scala-2.11.0-M2.tgz 3、修改环境变量 阅读全文
posted @ 2018-03-14 18:02 孤*狼 阅读(556) 评论(0) 推荐(0) 编辑
摘要: 在安装好hadoop集群并成功的启动了hdfs之后,我们就可以利用hdfs对文件进行操作了,一下是对文件的一些基本操作 hdfs基本操作 1、查询命令 hadoop dfs -ls / 查询/目录下的所有文件和文件夹 hadoop dfs -ls -R 以递归的方式查询/目录下的所有文件 2、创建文 阅读全文
posted @ 2018-03-14 16:34 孤*狼 阅读(35732) 评论(1) 推荐(1) 编辑
摘要: (搭建hadoop集群的前提是服务器已成功安装jdk以及服务器之间已设置免密码登录,服务器之间的免密码登录可参考《linux服务器间ssh免密码登录》) 1、下载hadoop安装包 wget http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-3 阅读全文
posted @ 2018-03-14 13:43 孤*狼 阅读(6558) 评论(2) 推荐(1) 编辑