摘要: 本文章的前置Hadoop-3.3.6分布式集群搭建步骤 1.在mapred-site.xml中配置历史服务器 <?xml version="1.0"?> <?xml-stylesheet type="text/xsl" href="configuration.xsl"?> <configuratio 阅读全文
posted @ 2023-11-27 21:04 SpringCore 阅读(59) 评论(0) 推荐(0) 编辑
摘要: 1.HDFS的Shell操作 1.基本语法 hadoop fs 具体命令 hdfs dfs 具体命令 hadoop fs 和hdfs dfs 是相等的 1.新建文件夹 hadoop fs -mkdir {folderName} hadoop fs -mkdir /coreqi 2.上传文件 1.从本 阅读全文
posted @ 2023-11-27 19:48 SpringCore 阅读(29) 评论(0) 推荐(0) 编辑
摘要: 1.下载JDK8 Linux 安装Openjdk 2.下载Hadoop3.3.6 Hadoop 安装及环境变量配置 3.创建hadoop数据存储的目录 mkdir -p /opt/hadoop/tmp /opt/hadoop/hdfs/data /opt/hadoop/hdfs/name 4.配置h 阅读全文
posted @ 2023-11-27 13:53 SpringCore 阅读(1693) 评论(0) 推荐(0) 编辑