摘要：
一、环境准备 将事先准备好的 Hadoop jar 文件安装到非中文无空格的路径下： 配置 环境变量 eclipse 创建 maven 项目， pom.xml 引入一下依赖 <dependencies> <dependency> <groupId>junit</groupId> <artifactI 阅读全文
摘要：
下面我们一起学习 HDFS常用 Shell 命令，开始之前，我们启动 HDFS 和 Yarn; [hui@hadoop103 ~]$ /opt/module/hadoop-2.7.2/sbin/start-dfs.sh Starting namenodes on [hadoop103]hadoop1 阅读全文
摘要：
一、HDFS 产生的背景 Hadoop 的三大组成为：HDFS、YARN 和 Map Reduce，今天我们主要探讨 HDFS。 随着数据量的越来越大，在一个操作系统无法存放所有的数据，那么就需要将数据分派到更多的操作系统管理的磁盘中，但是不方便管理和维护，迫切需要一种系统来管理多台机器上的文件，这 阅读全文