work hard work smart

专注于Java后端开发。 不断总结,举一反三。
  博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

2021年1月31日

摘要: 1、YARN架构 图片来自: https://hadoop.apache.org/docs/r3.2.2/hadoop-yarn/hadoop-yarn-site/YARN.html 1个RN(ResourceManager)和多个NM(NodeManager) ResourceManager职责: 阅读全文

posted @ 2021-01-31 23:09 work hard work smart 阅读(167) 评论(0) 推荐(0) 编辑

摘要: 这里简单介绍下MapReduce 1、什么是MapReduce 1、源自Google的MapReduce论文 2、发表于2004年12月,Hadoop MapReduce是Google MapReduce的克隆版 2、MapReduce特点 易于编程 良好的扩展性 高容错性 海量数据的离线处理 3、 阅读全文

posted @ 2021-01-31 12:20 work hard work smart 阅读(196) 评论(0) 推荐(0) 编辑