随笔分类 - HADOOP
摘要：0 入门 HADOOP入门（1）：概述 HADOOP入门（2）：使用（1）安装（1）Hadoop运行环境搭建（开发重点）centos HADOOP入门（3）：使用（2）安装（2）Hadoop运行环境搭建（开发重点）centos HADOOP入门（3）：使用（2）安装（2）Hadoop运行环境搭建（开
阅读全文
摘要：5 Yarn常用命令 Yarn状态的查询，除了可以在hadoop103:8088页面查看外，还可以通过命令操作。常见的命令操作如下所示： 需求：执行WordCount案例，并用Yarn命令查看任务运行情况。 [atguigu@hadoop102 hadoop-3.1.3]$ myhadoop.sh
阅读全文
摘要：1）防火墙没关闭、或者没有启动YARN INFO client.RMProxy: Connecting to ResourceManager at hadoop108/192.168.10.108:8032 2）主机名称配置错误 3）IP地址配置错误 4）ssh没有配置好 5）root用户和atgu
阅读全文
摘要：0 简介 分析： 1）准备3台客户机（关闭防火墙、静态IP、主机名称） 2）安装JDK 3）配置环境变量 4）安装Hadoop 5）配置环境变量 6）配置集群 7）单点启动 8）配置ssh 9）群起并测试集群 1 虚拟机准备 2 编写集群分发脚本xsync 1）scp（secure copy）安全拷
阅读全文
摘要：0 简介 1）Hadoop官方网站：http://hadoop.apache.org/ 2）Hadoop运行模式包括：本地模式、伪分布式模式以及完全分布式模式。 本地模式：单机运行，只是用来演示一下官方案例。生产环境不用。 伪分布式模式：也是单机运行，但是具备Hadoop集群的所有功能，一台服务器模
阅读全文
