随笔分类 - hadoop学习笔记

记录我的hadoop入门学习过程

摘要：Yarn学习 YARN简介 YARN是一个通用资源管理系统和调度平台，可为上层应用提供统一的资源管理和调度 YARN功能说明资源管理系统：集群的硬件资源，和程序运行相关，比如内存、CPU等。调度平台：多个程序同时申请计算资源如何分配，调度的规则（算法）。通用：不仅仅支持MapReduce程序，阅读全文

posted @ 2022-04-02 12:33 三块的可乐阅读(69) 评论(0) 推荐(0) 编辑

Hadoop入门学习笔记（一）

摘要：Week2 学习笔记 Hadoop核心组件 Hadoop HDFS（分布式文件存储系统）：解决海量数据存储 Hadoop YARN（集群资源管理和任务调度框架）：解决资源任务调度 Hadoop MapReduce（分布式计算框架）：解决海量数据计算安装hadoop环境集群角色规划服务器运行角阅读全文

posted @ 2022-04-01 21:06 三块的可乐阅读(280) 评论(1) 推荐(0) 编辑