向hdfs上传文件,运行程序,查看结果

1.建立目录 

hdfs dfs -mkdir -p /data/wc/input

2.上传文件

hdfs dfs -D dfs.blocksize=1048576 -put /setup/data.txt /data/wc/input

3.进入运行程序所在目录

cd /software/hadoop-2.7.7/share/hadoop/mapreduce

4.运行程序

hadoop jar hadoop-mapreduce-examples-2.7.7.jar wordcount /data/wc/input  /data/wc/output 

5.查看目录下的文件

hdfs dfs -ls /data/wc/output

6.查看具体文件内容

hdfs dfs -cat /data/wc/output/part-r-00000

7.下载文件

hdfs dfs -get /data/wc/output/part-r-00000 /setup

 

注意:输出目录“/data/wc/output ”,必须是空目录,否则会报错。

posted @   技术研究与问题解决  阅读(562)  评论(0编辑  收藏  举报
编辑推荐:
· 如何编写易于单元测试的代码
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
阅读排行:
· 地球OL攻略 —— 某应届生求职总结
· 周边上新:园子的第一款马克杯温暖上架
· Open-Sora 2.0 重磅开源!
· 提示词工程——AI应用必不可少的技术
· .NET周刊【3月第1期 2025-03-02】
点击右上角即可分享
微信分享提示