2016年4月7日

hadoop查看文件大小
摘要： hadoop fs -du /yj/input/ 列出input下所有文件的大小，以B为单位 #!/bin/sh#echo "hadoop fs -du /"hadoop fs -du /|awk '{print $1/1000000;}' 以分别以B,KB,M,G显示 #!/bin/sh#e... 阅读全文
posted @ 2016-04-07 22:41 长456风 阅读(5927) 评论(0) 推荐(0) 编辑
hadoop1.2.1安装配置
摘要： 原文地址 环境：ubuntu13 使用的用户为普通用户。如：用户ru jdk安装略 1、安装ssh (1) Java代码 sudo apt-get install openssh-server (2)配置ssh面密码登录 Xml代码 $ ssh-... 阅读全文
posted @ 2016-04-07 20:18 长456风 阅读(185) 评论(0) 推荐(0) 编辑
windows下使用eclipse远程编写hadoop配置
摘要： 1、按照一般方法配置好hadoop伪分布式，注意core-site.xml和mapred-site.xml用IP，不要用localhost 2、格式化hdfs文件系统hadoop namenode -format 2、更改本地用户名为远程服务器的hadoop用户名，我的直接改成了root 3、我... 阅读全文
posted @ 2016-04-07 20:17 长456风 阅读(258) 评论(0) 推荐(0) 编辑

导航