摘要：
在Yarn框架中，调度器是一块很重要的内容。有了合适的调度规则，就可以保证多个应用可以在同一时间有条不紊的工作。最原始的调度规则就是FIFO，即按照用户提交任务的时间来决定哪个任务先执行，但是这样很可能一个大任务独占资源，其他的资源需要不断的等待。也可能一堆小任务占用资源，大任务一直无法得到适当的资 阅读全文
摘要：
以下只是简单的对hdfs（hdfs.site.xml）配置文件做一个简单的说明。 <configuration><property><!-- 为namenode集群定义一个services name --><name>dfs.nameservices</name><value>ns1</value> 阅读全文
摘要：
以下只是对yarn配置文件（yarn.site.xml）简单的一个配置 补充： 1、yarn监控nodemanager的运行状况 Hadoop提供了一种机制，管理员可以通过该机制定期运行管理员提供的脚本以确定节点是否健康。 管理员可以通过在脚本中执行对其选择的任何检查来确定节点是否处于正常状态。如果 阅读全文
摘要：
以前一直对iptables的sport、dport不清楚，所以这里记录一下。 （1）清理防火墙： iptables -F iptables -X iptables -Z （2）iptables命令选项输入顺序： iptables -t 表名 <-A/I/D/R> 规则链名 [规则号] <-i/o 网 阅读全文