Loading

摘要: # 1. Counter 计数器 ## 1.1 概述 在执行 MapReduce 程序的时候,控制台输出信息中通常有下面所示片段内容: ``` File System Counters FILE: Number of bytes read=136988 FILE: Number of bytes w 阅读全文
posted @ 2023-07-03 19:25 tree6x7 阅读(19) 评论(0) 推荐(0) 编辑
摘要: # 1. MR 基本原理 ![](https://img2023.cnblogs.com/blog/1104875/202307/1104875-20230703174151809-848363603.png) ## 1.1 MapTask 并行度机制 > **MapTask 的并行度指的是 map 阅读全文
posted @ 2023-07-03 17:47 tree6x7 阅读(20) 评论(0) 推荐(0) 编辑
摘要: # 1. MapReduce 概述 MapReduce 是一个分布式运算程序的编程框架,是用户开发“基于 Hadoop 的数据分析应用”的核心框架。 MapReduce 核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序,并发运行在一个 Hadoop 集群上。 ## 1. 阅读全文
posted @ 2023-07-03 17:40 tree6x7 阅读(28) 评论(0) 推荐(0) 编辑