2021年2月1日
hadoop伪分布式配置文件说明
摘要： hadoop配置文件分两类：默认配置文件和自定义配置文件，只有用户想修改某一默认配置值时，才需要修改自定义配置文件，更改相应属性值。 1、默认配置文件 要获取的默认文件 文件存放在Hadoop的jar包中的位置 [core-default.xml] hadoop-common-3.1.4.jar/ 阅读全文
posted @ 2021-02-01 17:09 炫舞风中 阅读(123) 评论(0) 推荐(0) 编辑
启动YARN并运行MapReduce程序
摘要： 备注：此处的hadoop版本是3.1.4 一、配置集群 1.1、配置yarn-site.xml <!-- Reducer获取数据的方式 --> <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle 阅读全文
posted @ 2021-02-01 10:14 炫舞风中 阅读(1161) 评论(0) 推荐(0) 编辑