02 2021 档案

摘要:背景因CDH数据交互比较频繁,硬盘的消耗较快,硬盘正常使用3年后容易出现硬盘坏道,为了避免硬盘坏道过多导致影响业务,经在测试环境中测试更换CDH集群节点硬盘后数据块未出现丢失现象。实施步骤(测试环境node5节点进行测试):查找异常硬盘挂载目录目前是望京CDH平台node9的/dev/sdb1硬盘有坏道,所挂载的目录是/dfs/dn2Web操作该节点去掉对应目录进入node9节点的DataNode 阅读全文
posted @ 2021-02-22 18:06 纯捡垃圾吃的 阅读(603) 评论(0) 推荐(0) 编辑
摘要:背景 因CDH数据交互比较频繁,硬盘的消耗较快,硬盘正常使用3年后容易出现硬盘坏道,为了避免硬盘坏道过多导致影响业务,经在测试环境中测试更换CDH集群节点硬盘后数据块未出现丢失现象。 实施步骤(测试环境node5节点进行测试): 查找异常硬盘挂载目录 目前是望京CDH平台node9的/dev/sdb 阅读全文
posted @ 2021-02-22 17:57 纯捡垃圾吃的 阅读(481) 评论(0) 推荐(0) 编辑
摘要:目录: ·Yarn资源队列权限控制 ·Hive表与Hdfs文件权限同步控制 ·独立Hdfs文件权限控制一、 Yarn资源队列权限控制1.首先为了后面的测试,在集群所有节点上创建fayson1和fayson2两个用户。"useradd fayson1""useradd fayson2"2.从Cloudera Manager进入“动态资源池配置”3.设置根root队列的ACL保存4.新建队列fayso 阅读全文
posted @ 2021-02-22 17:26 纯捡垃圾吃的 阅读(571) 评论(0) 推荐(0) 编辑
摘要:正文 一、安装 1.1 yum安装 (1) 配置好yum源与epel源 #本地光盘yum源 [development] name=dvdbase repo baseurl=file:///mnt/cdrom/ enabled=1 gpgcheck=1 gpgkey=file:///mnt/cdrom 阅读全文
posted @ 2021-02-19 10:26 纯捡垃圾吃的 阅读(4368) 评论(0) 推荐(0) 编辑

返回顶部
点击右上角即可分享
微信分享提示