Hadoop上简单运行WordCount

注:图片如果损坏,点击文章链接:https://www.toutiao.com/i6597304814411973128/

 

我们先搭建本地环境

准备的两个工具

Hadoop上简单运行WordCount

 

将winutils中的两个文件拷贝

Hadoop上简单运行WordCount

 

Hadoop上简单运行WordCount

 

配置环境变量

Hadoop上简单运行WordCount

 

将日志文件拷贝到我们新建的Eclipse中的Maven项目中

Hadoop上简单运行WordCount

 

Hadoop上简单运行WordCount

 

编写Mapper

Hadoop上简单运行WordCount

 

编写Reduce

Hadoop上简单运行WordCount

 

编写主类

Hadoop上简单运行WordCount

 

我们来运行一下

我们先打一个JAR包

Hadoop上简单运行WordCount

 

Hadoop上简单运行WordCount

 

我导出到本地项目中了

Hadoop上简单运行WordCount

 

将包上传到我们的虚拟机中

Hadoop上简单运行WordCount

 

上传我们的测试文件

Hadoop上简单运行WordCount

 

我们运行一下

Hadoop上简单运行WordCount

 

Hadoop上简单运行WordCount

 

我们查看一下浏览器

Hadoop上简单运行WordCount

 

虚拟机查看一下

Hadoop上简单运行WordCount

 

 

posted on   那山的狐狸  阅读(139)  评论(0编辑  收藏  举报

编辑推荐:
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 基于Microsoft.Extensions.AI核心库实现RAG应用
阅读排行:
· TypeScript + Deepseek 打造卜卦网站:技术与玄学的结合
· 阿里巴巴 QwQ-32B真的超越了 DeepSeek R-1吗?
· 【译】Visual Studio 中新的强大生产力特性
· 10年+ .NET Coder 心语 ── 封装的思维:从隐藏、稳定开始理解其本质意义
· 【设计模式】告别冗长if-else语句:使用策略模式优化代码结构
< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

导航

统计

点击右上角即可分享
微信分享提示