随笔分类 -  大数据环境

Storm伪分布式配置
摘要：配置zookeeper 教程链接: https://www.cnblogs.com/studyNotesSL/p/11517477.html 配置Strom 配置环境变量 修改配置文件 启动Strom 查看启动状态 查看Strom Web UI页面: "http://localhost:8080" 阅读全文
posted @ 2019-09-17 16:22 会走的树 阅读(351) 评论(0) 推荐(0) 编辑
Flume伪分布式配置
摘要：配置Flume 修改flume env.sh 修改Hbase的hbase env.sh（未出现异常可以忽略） 查看Flume配置版本 测试Flume（avro source） 修改avro.conf 启动flume agent a1 向指定文件写入日志 启动avro client 在启动的服务控制台 阅读全文
posted @ 2019-09-13 19:33 会走的树 阅读(266) 评论(0) 推荐(0) 编辑
Hbase伪分布式配置
摘要：Hbase配置 修改hbase env.sh 修改hbase site.xml 查看配置是否成功 启动hbase 阅读全文
posted @ 2019-09-13 19:31 会走的树 阅读(669) 评论(0) 推荐(0) 编辑
Zookeeper伪分布式配置
摘要：解压文件 修改配置文件 启动zookeeper 阅读全文
posted @ 2019-09-13 19:28 会走的树 阅读(642) 评论(0) 推荐(0) 编辑
分布式集群搭建大全
摘要：系统准备 相关软件包下载： 链接：https://pan.baidu.com/s/1EOLUphwZgzwSX01HsDJM0g 提取码：1tsf 说明 特别说明: 教程用的主机名分别为master,slave1,slave2 所以发现有出现主机名为 ” spark1”的主机名 等同于 “maste 阅读全文
posted @ 2019-08-27 12:36 会走的树 阅读(440) 评论(0) 推荐(0) 编辑
Hadoop伪分布式配置
摘要：系统:Centos6.5 创建需要的文件夹 安装jdk 配置环境变量 Hadoop2.7.3伪分布式配置 yarn配置 阅读全文
posted @ 2019-08-19 15:21 会走的树 阅读(3983) 评论(0) 推荐(0) 编辑
kafka伪分布式配置
摘要：http://dblab.xmu.edu.cn/blog/1096 2/ 安装kafka 修改zookeeper.properties 修改server.properties 测试kafka 阅读全文
posted @ 2019-08-18 14:27 会走的树 阅读(217) 评论(0) 推荐(0) 编辑
Sqoop伪分布式配置
摘要： 阅读全文
posted @ 2019-08-17 12:58 会走的树 阅读(346) 评论(0) 推荐(0) 编辑
Spark伪分布式配置
摘要： 阅读全文
posted @ 2019-08-17 11:31 会走的树 阅读(493) 评论(0) 推荐(0) 编辑
Hive伪分布式配置
摘要："安装MySQL" 安装HIve 配置环境变量 使用hive默认的元数据 使用MySQL作为元数据 Linux远程连接MySQL (5.1.41版本) 启动hive 参考: "大数据技术原理与应用 第十四章 基于Hadoop的数据仓库Hive 学习指南" "关于hive异常：Unable to in 阅读全文
posted @ 2019-08-17 10:50 会走的树 阅读(574) 评论(0) 推荐(0) 编辑
MySQL配置及常见问题解决
摘要：本机安装MySQL (非Linux core版本) MySQL默认连接端口：3306 卸载已经安装 使用yum安装MySQL 启动mysql服务 解决初始密码问题 sqoop导入MySQL中文乱码的问题 Linux core连接MySQL 添加MySQL的主机IP映射 安装MySQL的客户端 阅读全文
posted @ 2019-08-17 10:46 会走的树 阅读(387) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示