05 2022 档案

Hadoop-HA介绍及搭建
摘要：一、Hadoop-HA 1.1 Hadoop1.x带来的问题 1、单点故障 a. 每个群集只有一个NameNode，NameNode存在单点故障（SPOF）。 ​ b. 如果该计算机或进程不可用，则整个群集在整个NameNode重新启动或在另一台计算机上启 动之前将不可用 ​ c. 如果发生意外事件 阅读全文
posted @ 2022-05-26 19:47 呆滞的猪蹄 阅读(335) 评论(0) 推荐(0) 编辑
Hadoop进程理解
摘要：进程理解 HDFS相关进程理解（NN,DN,SSN） NameNode中存放的是数据文件与元数据的映射信息，数据文件和block快的映射信息，block块和DataNode的映射信息，前两者存放在磁盘里，Hadoop stop后不会消失，第三个存放在内存中，会消失；​DataNode通过PING P 阅读全文
posted @ 2022-05-25 13:57 呆滞的猪蹄 阅读(114) 评论(0) 推荐(0) 编辑
Hadoop常见shell命令
摘要：Hadoop中常见的shell命令 1、如何将Linux本地的数据上传到HDFS中？ hadoop fs -put 本地的文件 HDFS中的目录hdfs dfs -put 本地的文件 HDFS中的目录 2、如何创建HDFS中的文件夹？ 需求：想创建/shujia/bigdata17 hadoop f 阅读全文
posted @ 2022-05-21 23:29 呆滞的猪蹄 阅读(170) 评论(0) 推荐(0) 编辑
Hadoop配置与安装
摘要：基础配置 1、关闭防火墙 systemctl stop firewalld.service #停止firewall systemctl disable firewalld.service #禁止firewall开机启动 查看防火墙状态 firewall-cmd --state systemctl s 阅读全文
posted @ 2022-05-21 15:43 呆滞的猪蹄 阅读(182) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示