摘要: 一、集群安全模式 概述 语法: 集群处于安全模式,不能执行重要操作(写操作)。集群启动完成后,自动退出安全模式。 (1)bin/hdfs dfsadmin -safemode get (功能描述:查看安全模式状态) (2)bin/hdfs dfsadmin -safemode enter (功能描述 阅读全文
posted @ 2020-10-13 22:36 晓枫的春天 阅读(220) 评论(0) 推荐(0) 编辑
摘要: 一、NameNode & SecondaryNameNode 工作机制 1. 第一阶段:NameNode启动 (1)第一次启动NameNode格式化后,创建Fsimage和Edits文件。如果不是第一次启动,直接加载编辑日志和镜像文件到内存。 (2)客户端对元数据进行增删改的请求。 (3)NameN 阅读全文
posted @ 2020-10-13 21:51 晓枫的春天 阅读(505) 评论(0) 推荐(0) 编辑
摘要: 问题场景 今天有个需求,将 hive 跑完的数据入到 Oracle 里,需求侧直接从 Oracle 表里取数据,不接收文件; 通过下面脚本落到本地文件: [hive@hadoop101 tool]$ more hive_2_file.sh #!/bin/sh path=$1 query=$2 fil 阅读全文
posted @ 2020-10-13 21:16 晓枫的春天 阅读(1775) 评论(0) 推荐(0) 编辑