2018年1月27日

cdh5.13.1 hadoop hdfs HA模式无法启动

摘要： 经过观察日志发现，JN三个节点启动正常，只有NN节点启动时提示JN节点没有格式化 停止HDFS下面所有服务 先启动JN节点 然后启动一个NN节点，观察三个JN节点日志 发现其中一个节点的日志正常，没有报错，别两个节点报没有格式化。 停止所有节点，删除有报警节点的/dfs/jn目录 用没有报错节点的目 阅读全文

posted @ 2018-01-27 19:36 net2817 阅读(224) 评论(0) 推荐(0) 编辑

hibench 对CDH5.13.1进行基准测试（测试项目hadoop\spark\)HDFS作HA高可靠性

摘要： 使用CDH 5.13.1部署了HADOOP集群之后，需要进行基准性能测试。 一、hibench 安装 1.安装位置要求。 因为是全量安装，其中有SPARK的测试（SPARK2.0）。 安装位置在SPARK 服务所在的节点上面。 下载hibench编译好的包与manve的包 hibench全部编译 m 阅读全文

posted @ 2018-01-27 14:42 net2817 阅读(597) 评论(0) 推荐(0) 编辑

导航