摘要: ##前提:远程服务器关闭防火墙 #1. 本地配置.ssh/config文件 Host sam_mac //可自行定义 HostName 172.22.192.106 //远程服务器ip地址 User sam //远程服务器主机名 #2. 本地打开终端,输入以下命令 PS C:\Users\45378 阅读全文
posted @ 2022-02-24 16:29 递茶大户 阅读(254) 评论(0) 推荐(0) 编辑
摘要: #1. 关闭yarn服务进程 [root@sam01 ~]# stop-yarn.sh #2. 进入Hadoop配置文件目录 [root@sam01 ~]# cd /usr/local/hadoop/etc/hadoop/ #3. 修改yarn-site.xml文件,添加以下内容 <!-- 开启日志 阅读全文
posted @ 2022-02-22 22:12 递茶大户 阅读(73) 评论(0) 推荐(0) 编辑
摘要: #1. hdfs上的问题,则查看对应的日志 less 或 tail -1000 $HADOOP_HOME/logs/hadoop-{user.name}-{jobname}-{hostname}.log #2. yarn上的问题 less 或 tail -1000 $HADOOP_HOME/logs 阅读全文
posted @ 2022-02-22 21:46 递茶大户 阅读(64) 评论(0) 推荐(0) 编辑
摘要: #进入zookeeper的bin目录 cd /usr/local/zookeeper/bin ##1. 启动客户端,连接本地服务进程 [root@sam01 bin]# zkCli.sh ###1.1 输入quit退出进程 ##2. 连接集群中sam02的服务进程 [root@sam01 bin]# 阅读全文
posted @ 2022-02-21 22:10 递茶大户 阅读(161) 评论(0) 推荐(0) 编辑
摘要: 当使用命令行start-dfs.sh开启hdfs守护进程时,secondaryNamenode打开不了,卡顿在 Starting namenodes on [sam01] sam01: starting namenode, logging to /usr/local/hadoop/logs/hado 阅读全文
posted @ 2022-02-21 21:02 递茶大户 阅读(562) 评论(0) 推荐(0) 编辑
摘要: ##1. 把网络配置改为NAT模式 ##2. 通过Mac终端输入指令 cd /Library/Preferences/VMware\ Fusion/vmnet8 ##3. 通过终端输入指令打开nat.conf文件,查看网关 cat nat.conf ##4. 查看静态IP地址范围 cat dhcpd 阅读全文
posted @ 2022-02-20 20:13 递茶大户 阅读(271) 评论(0) 推荐(0) 编辑
摘要: ##1. 在编译vmware-install.pl文件的时候遇到以下问题 -bash: ./vmware-install.pl:/usr/bin/perl:bad interpreter:No such file or directory ###1.1 缺少perl,进行安装 yum install 阅读全文
posted @ 2022-02-20 17:00 递茶大户 阅读(483) 评论(0) 推荐(0) 编辑
摘要: #1. 添加用户sam02 ##1.1 输入指令 useradd sam02 #2. 设置用户密码 ##2.1 输入指令 passwd sam02 阅读全文
posted @ 2022-02-19 23:08 递茶大户 阅读(167) 评论(0) 推荐(0) 编辑
摘要: #1. 下载zookeeper http://archive.apache.org/dist/zookeeper/ #2. 将下载好的安装包解压至/usr/local/ tar -zxvf zookeeper-3.4.10.tar.gz -C /usr/local/ #3. 更名(方便配置及使用) 阅读全文
posted @ 2022-02-18 10:53 递茶大户 阅读(188) 评论(0) 推荐(0) 编辑
摘要: #启动hdfs集群 #访问HDFS的命令 ##1. 创建目录 hdfs dfs -mkdir (-p) /目录 hdfs dfs -mkdir /data hdfs dfs -mkdir -p /a/b/c/d/e/f/g ##2. 上传指令 ###格式:hdfs dfs -put /本地文件 /分 阅读全文
posted @ 2022-02-16 22:04 递茶大户 阅读(579) 评论(0) 推荐(0) 编辑