2020年7月26日
Hadoop资源调度器
摘要： Hadoop调度器主要有三种：FIFO、Capacity Scheduler和Fair Scheduler。Hadoop2.7.2默认的资源调度器是Capacity Scheduler 具体设置详见：yarn-default.xml文件 <property> <description>The cla 阅读全文
posted @ 2020-07-26 18:56 芒果不氓 阅读(154) 评论(0) 推荐(0) 编辑
整合Hadoop(包括:hdfs,mapreduce,yarn)
摘要： Hdfs: 一、HDFS运行机制 概述：用户的文件会被切块后存储在多台datanode节点中，并且每个文件在整个集群中存放多个副本，副本的数量可以通过修改配置自己设定。 HDFS：Hadoop Distributed file system，分布式文件系统。 HDFS的机制： HDFS集群中，有两种 阅读全文
posted @ 2020-07-26 18:41 芒果不氓 阅读(395) 评论(0) 推荐(0) 编辑
Hadoop序列化概述
摘要： 序列化概述: 阅读全文
posted @ 2020-07-26 18:10 芒果不氓 阅读(139) 评论(0) 推荐(0) 编辑