2018年12月29日

在cm集群当中对yarn资源的管理的设置(Yarn 动态资源池配置)

摘要: 最近在做yarn的资源隔离,就是在yarn的控制界面实现对yarn的资源的划分。这个一般是对资源的动态分配。 这里是相关的权限可以设置核心数等信息。 计划策略这一栏就是使用默认的设置。其他的设置可以先不管。接下来我们在来看我们真个资源调度的执行顺序: 这里设置成功之后,我们在提交代码的时候将代码指定 阅读全文

posted @ 2018-12-29 18:12 gxg123 阅读(2250) 评论(0) 推荐(0) 编辑

在CM集群中安装集成kafka的注意事项

摘要: 今天在CM安装的CDH的大数据管理平台上集成kafak,遇到的一些坑,记录下来: 我安装的CM是5.14.0.在这个版本当中他没有被纳入到CDH的安装平台,所以他需要安装激活等操作,和我们手动集成spark2的操作是一样的。 (1)第一步下载parcels (2) 然后在我们的集群当中就出现了kaf 阅读全文

posted @ 2018-12-29 16:24 gxg123 阅读(492) 评论(0) 推荐(0) 编辑

导航