2018年8月7日
YARN调试过程中的常见问题
摘要： 执行操作： hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.0.jar wordcount /user/today/input /user/today/output 报错： 错误: 找不到或无法加载主类 org.apac 阅读全文
posted @ 2018-08-07 15:15 |瑾诺学长| 阅读(1256) 评论(0) 推荐(0) 编辑
YARN的基础配置
摘要： 一、配置yarn集群 1.配置yarn-env.sh 添加：export JAVA_HOME=/opt/module/jdk1.8.0_144 2.配置yarn-site.xml 1 <!-- reducer获取数据的方式--> 2 <property> 3 <name>yarn.nodemanag 阅读全文
posted @ 2018-08-07 15:10 |瑾诺学长| 阅读(6908) 评论(3) 推荐(3) 编辑
HDFS基础配置
摘要： HADOOP-3.1.0 HDFS基础配置 执行步骤：（1）配置集群（2）启动、测试集群增、删、查（3）执行wordcount案例 一、配置集群 1.在 hadoop-env.sh配置文件添加 jdk绝对路径 export JAVA_HOME=/opt/module/jdk1.8.0_181 配置文 阅读全文
posted @ 2018-08-07 12:35 |瑾诺学长| 阅读(947) 评论(0) 推荐(0) 编辑