随笔 - 1357  文章 - 0  评论 - 1104  阅读 - 1941万

pig grunt shell详解

输入pig -x local此时pig和本地的文件系统交互,省略“-x local”,pig和hdfs交互。

1、在pig中执行HDFS的命令
hadoop@ubuntu:~$ pig
grunt> fs -ls /
grunt> cat filename  #打印文件的内容
grunt> copyFromLocal localfile hdfsfile  #拷贝本地文件到hdfs
grunt> copyToLocal hdfsfile localfile
grunt> rmr  filename #删除文件
此外还有HDFS基本的命令:chgrp, chmod, chown, cp, du, ls, mkdir, mv, rm, stat

2、grunt控制pig作业
kill jobid
exec “参数“ script
run ”参数“ script

参考资料:
hadoop hdfs uri详解
http://www.tieguanyin168.com/index.php/hdfs-uri-1771.html
hadoop命令详解
http://www.tieguanyin168.com/index.php/hadoop-command-1769.html
hadoop Shell命令详解
http://www.tieguanyin168.com/index.php/hadoop-shell-1775.html 

posted on   Ruthless  阅读(2354)  评论(0编辑  收藏  举报
编辑推荐:
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 基于Microsoft.Extensions.AI核心库实现RAG应用
· Linux系列:如何用heaptrack跟踪.NET程序的非托管内存泄露
· 开发者必知的日志记录最佳实践
阅读排行:
· TypeScript + Deepseek 打造卜卦网站:技术与玄学的结合
· Manus的开源复刻OpenManus初探
· 写一个简单的SQL生成工具
· AI 智能体引爆开源社区「GitHub 热点速览」
· C#/.NET/.NET Core技术前沿周刊 | 第 29 期(2025年3.1-3.9)
历史上的今天:
2011-03-11 sax解析xml案例二
2011-03-11 sax解析xml案例一
2011-03-11 设置背景图片占满整个浏览器屏幕
< 2013年3月 >
24 25 26 27 28 1 2
3 4 5 6 7 8 9
10 11 12 13 14 15 16
17 18 19 20 21 22 23
24 25 26 27 28 29 30
31 1 2 3 4 5 6

点击右上角即可分享
微信分享提示