摘要: 背景因CDH数据交互比较频繁,硬盘的消耗较快,硬盘正常使用3年后容易出现硬盘坏道,为了避免硬盘坏道过多导致影响业务,经在测试环境中测试更换CDH集群节点硬盘后数据块未出现丢失现象。实施步骤(测试环境node5节点进行测试):查找异常硬盘挂载目录目前是望京CDH平台node9的/dev/sdb1硬盘有坏道,所挂载的目录是/dfs/dn2Web操作该节点去掉对应目录进入node9节点的DataNode 阅读全文
posted @ 2021-02-22 18:06 纯捡垃圾吃的 阅读(583) 评论(0) 推荐(0) 编辑
摘要: 背景 因CDH数据交互比较频繁,硬盘的消耗较快,硬盘正常使用3年后容易出现硬盘坏道,为了避免硬盘坏道过多导致影响业务,经在测试环境中测试更换CDH集群节点硬盘后数据块未出现丢失现象。 实施步骤(测试环境node5节点进行测试): 查找异常硬盘挂载目录 目前是望京CDH平台node9的/dev/sdb 阅读全文
posted @ 2021-02-22 17:57 纯捡垃圾吃的 阅读(471) 评论(0) 推荐(0) 编辑
摘要: 目录: ·Yarn资源队列权限控制 ·Hive表与Hdfs文件权限同步控制 ·独立Hdfs文件权限控制一、 Yarn资源队列权限控制1.首先为了后面的测试,在集群所有节点上创建fayson1和fayson2两个用户。"useradd fayson1""useradd fayson2"2.从Cloudera Manager进入“动态资源池配置”3.设置根root队列的ACL保存4.新建队列fayso 阅读全文
posted @ 2021-02-22 17:26 纯捡垃圾吃的 阅读(560) 评论(0) 推荐(0) 编辑
返回顶部