摘要:
安装部分 使用root用户,进入到/bigdata/soft目录,下载的文件会到这个目录,并安装wget工具 cd /bigdata/soft yum -y install wget 使用wget命令下载MySQL的rpm包 wget -i -c http://dev.mysql.com/get/m 阅读全文
摘要:
使用shell脚本添加新用户,设置密码,和删除用户 #!/bin/bash read -p "是否要添加用户? 是(0)否(1)" USERADD if [ $USERADD -eq 0 ];then C=1 while [ $C -eq 1 ];do read -p "请输入添加账户账户名:" U 阅读全文
摘要:
yarn支持3种调度器,FIFO,容量,公平调度器。 ####FIFO调度算法 只有一个队列,任务执行是按照先进先出的顺序执行,无法支持多用户并发的场景。如下图 ####容器调度算法 yahoo开发的多用户调度器(apache yarn中默认使用) 特征 多队列:每个队列可配置一定的资源量,每个队列 阅读全文
摘要:
yarn作为hadoop的资源分配和调度的基础组件,有哪些相关的参数是和这个组件有关呢? ResourceManager相关 yarn.resourcemanager.scheduler.class #配置调度器,apache yarn默认容量调度器,CDH默认公平调度器 yarn.resource 阅读全文