Flume的安装部署
第一步:下载解压修改配置文件
-
Flume的安装非常简单,只需要解压即可
-
上传安装包到数据源所在节点上
-
这里我们在第三台机器hadoop03来进行安装
cd /bigdata/soft tar -xzvf apache-flume-1.9.0-bin.tar.gz -C /bigdata/install/ cd /bigdata/install/apache-flume-1.9.0-bin/conf/ cp flume-env.sh.template flume-env.sh vim flume-env.sh
修改如下内容
export JAVA_HOME=/kkb/install/jdk1.8.0_141
2. 解决jar包冲突
-
apache-flume-1.9.0-bin、hadoop-3.1.4都有guava包,但是版本不一致,会造成冲突
-
解决冲突;将hadoop中高版本的guava包,替换flume中低版本的包
cd /bigdata/install/flume-1.9.0/lib rm -f guava-11.0.2.jar cp /bigdata/install/hadoop-3.1.4/share/hadoop/common/lib/guava-27.0-jre.jar .