随笔分类 - Hadoop

更换Dolphinscheduler海豚调度器mysql地址

摘要：vim /usr/local/src/apache-dolphinscheduler/conf/config/install_config.conf修改以下网址 sh /usr/local/src/apache-dolphinscheduler/install.sh sh /usr/local/do 阅读全文

posted @ 2022-03-02 13:24 sunshineD 阅读(293) 评论(0) 推荐(0) 编辑

HDFS主从切换命令

摘要：#将active从nn1切换为nn22 sudo -u hdfs hdfs haadmin -ns 51fpzbHA -failover nn1 nn2 #查看哪个namenode是主 sudo -u hdfs hdfs haadmin -getServiceState nn1 输出：active 阅读全文

posted @ 2022-03-02 13:14 sunshineD 阅读(326) 评论(0) 推荐(0) 编辑

HDFS的高可用和高扩展

摘要：NameNode负责接收用户的操作请求，所有的读写请求都会经过它，如果它挂了怎么办？这个时候集群是不是就无法正常提供服务了？是的，那现在我们这个集群就太不稳定了，因为NameNode只有一个，是存在单点故障的，咱们在现实生活中，例如，县长，是有正的和副的，这样就是为了解决当正县长遇到出差的时候，副阅读全文

posted @ 2022-02-21 15:46 sunshineD 阅读(348) 评论(1) 推荐(0) 编辑

HDFS详解-NameNode、SecondaryNameNode、DataNode、HDFS回收站、HDFS安全模式介绍

摘要：一、HDFS体系结构 HDFS支持主从结构，主节点称为 NameNode ，是因为主节点上运行的有NameNode进程，NameNode支持多个。从节点称为 DataNode ，是因为从节点上面运行的有DataNode进程，DataNode支持多个。HDFS中还包含一个 SecondaryNameN 阅读全文

posted @ 2022-02-14 15:40 sunshineD 阅读(1824) 评论(0) 推荐(0) 编辑