Storm集群搭建
1 准备: 3台虚拟机 + Jdk8 +zookeeper集群
2 Storm集群部署
1)下载/opt/software目录下 官方网址:http://storm.apache.org/
2) 解压jar包到 ~/module目录下 tar -zxf apache-storm-1.1.0.tar.gz -C ~/modules/
3) 解压后的包 更名为 storm mv apache-storm-1.1.0/ storm
4) storm/目录下创建data文件夹 mkdir data
5) 修改配置 vim ~/modules/storm/conf/storm.yaml
6) 切换root用户 编辑 /etc/profile
把profile分发给集群
scp /etc/profile linux02:/etc/
scp /etc/profile linux03:/etc/
每个集群执行 source /etc/profile (root 用户)
7) 切换成kevin用户 分发storm安装包给集群
scp -r storm/ linux02:~/modules/
scp -r storm/ linux03:~/modules/
8) 启动集群 (启动前先开启zookeeper)
(1)每个机器上启动nimbus bin/storm nimbus &
(2)每个机器上启动supervisor bin/storm supervisor &
(3)master机器上启动UI bin/storm ui &
9) 为了让ui界面能看到log日志 需要在集群每个集群启动: bin/storm logviewer &