2017年11月7日

Cloudera运维

摘要： 1. 增加一个节点 1. 拷贝cm的jar包到该节点 2. 设置hostname（hostnamectl set-hostname XXX），然后修改hosts文件 3. 所有的节点添加该hostname 4. 修改agent配置文件，指向cloudera manager节点；启动cm 5. 进入到 阅读全文

posted @ 2017-11-07 15:59 张叫兽的技术研究院 阅读(1408) 评论(0) 推荐(0) 编辑

一次spark卡顿分析

摘要： 在104上面执行，经常会发生卡到了如下一句话： storage.BlockManagerInfo: Added broadcast_8_piece0 当再次卡顿的时候，我直接退出，然后通过yarn看后台的日志到底发生了什么，一看在这个地方频繁的爆出链接zookeeper失败；一看日志中的打出来的zo 阅读全文

posted @ 2017-11-07 15:54 张叫兽的技术研究院 阅读(515) 评论(0) 推荐(0) 编辑

导航