随笔分类 - Hadoop学习
摘要：HDFS简介 HDFS即Hadoop Distributed File System，是一个分布式文件系统，用于存储海量数据。一个HDFS集群由一个NameNode和多个DataNode组成。 HDFS特性 主从架构 分块存储 副本机制 元数据记录 抽象目录树 HDFS shell命令行 Hadoo
阅读全文
摘要：主要的两个错误，今天晚上一直轮着报： 第一个 2022-10-25 21:37:11,901 WARN hdfs.DataStreamer: DataStreamer Exception java.io.IOException: Failed to replace a bad datanode on
阅读全文
摘要：##Hadoop集群搭建 自己配置Hadoop的话太过复杂了，因为自己着急学习，就使用了黑马的快照。如果小伙伴们也想的话可以直接看黑马的课程，快照的话关注黑马程序员公众号，输入Hadoop就能获取资料，到时候直接看课程P9就可以了。 Hadoop集群启停命令和Web UI 手动逐个启停 优点：准确的
阅读全文
摘要：Linux文件系统基础知识 要想熟练使用命令，就先要熟练掌握Linux文件系统基础知识： 三个路径 当前路径：也叫当前工作目录，就是当前状态下用户所处的位置 相对路径：相对于当前工作目录开始的路径，会随着当前工作目录变化而变化 绝对路径：不管当前工作目录在哪，绝对路径都会从/根目录开始，唯一不重复
阅读全文
摘要：今天配置Linux网络，首先是虚拟机网络配置，然后是真实机访问虚拟机，然后是配置centos网卡，最后是给IP地址加网络名，然后配置网络服务，但是出错了，目前还没找到问题所在
阅读全文
摘要：学习课程是B站上的黑马程序员 第一阶段主要是基础的概念，数据、大数据；大数据特点；数据分析的基本流程、方向；分布式、集群；操作系统，虚拟机。基本上就是这些基本概念的学习。 第二阶段是虚拟机的安装，centos操作系统的导入，创建根用户，一般密码都是123456。还有VMware的一些操作，设置内存、
阅读全文
