摘要: 调用文件系统(FS)Shell命令应使用bin/hadoop fs 的形式。所有的的FS shell命令使用URI路径作为参数。URI路径详解点击这里。 1、cat 说明:将路径指定文件的内容输出到stdout。用法:hadoop fs -cat URI [URI …]范例:hadoop fs -cat hdfs://host1:port1/file1 hdfs://host2:port2/fi... 阅读全文
posted @ 2016-11-17 19:26 一人浅醉- 阅读(2244) 评论(0) 推荐(0) 编辑
摘要: 使用lzop命令解压并查看 :lzop -cd xxx.lzo |more 附压缩命令:lzop xxx.log (生成xxx.log.lzo) 其它参数: 需要在机器上安装lzop后才能使用命令,参考:http://cyibeike.blog.163.com/blog/static/2111257 阅读全文
posted @ 2016-11-17 16:26 一人浅醉- 阅读(9626) 评论(0) 推荐(0) 编辑
摘要: 获取默认配置 配置hadoop,主要是配置core-site.xml,hdfs-site.xml,mapred-site.xml三个配置文件,默认下来,这些配置文件都是空的,所以很难知道这些配置文件有哪些配置可以生效,上网找的配置可能因为各个hadoop版本不同,导致无法生效。浏览更多的配置,有两个方法:1.选择相应版本的hadoop,下载解压后,搜索*.xml,找到core-default.xm... 阅读全文
posted @ 2016-11-17 15:40 一人浅醉- 阅读(9695) 评论(0) 推荐(0) 编辑