随笔- 114 文章- 3 评论- 0 阅读- 31万

随笔分类 - hadoop

hadoop

014_Flume

摘要：1Flume定义什么是Flume。流式架构 Flume的主要作用实时读取服务器本地硬盘的数据，将数据写入到HDFS中。 Flume的优点灵活缓冲区的作用，减轻hdfs的压力。重平衡 Flume组成架构 2安装Flume 1：拷贝使用版本apache-flume-1.7.0- 阅读全文

posted @ 2024-10-31 14:10 Sunray0330 阅读(7) 评论(0) 推荐(0) 编辑

012_Zookeeper

摘要：1zookeeper是什么 2zookeeper的集群配置安装步骤 1. 解压2. 把conf文件夹下配置文件改个名字 cp zoo_sample.cfg zoo.cfg3. 编辑zoo.cfg,配置datadir dataDir=/opt/module/zookeeper-3.4.10/zkDa 阅读全文

posted @ 2024-10-31 14:09 Sunray0330 阅读(11) 评论(0) 推荐(0) 编辑

hadoop（安装）

摘要：1;安装liunx 3:安装 4:解压hadoop 5:配置相关文件 1：配置core-site.xml文件 2：配置hdfs-site.xml文件 3：配置yarn-site.xml文件 4：配置mapred-site.xml文件 5：配置环境变量 /etc/hosts文件配置 /etc/sysc 阅读全文

posted @ 2019-11-04 09:50 Sunray0330 阅读(94) 评论(0) 推荐(0) 编辑

01_hadoop

摘要：hadoop的组成结构阅读全文

posted @ 2019-09-13 13:47 Sunray0330 阅读(96) 评论(0) 推荐(0) 编辑