sqoop 1.4.7 安装配置/连接测试
环境:
hadoop2.7.7
mysql 8
zk 3.4.10
hive 3
1.上传并解压tar包后进入conf目录
拷贝sqoop-env-template.sh并重命名为sqoop-env.sh(conf目录下已经有了sqoop-site.xml)
2.编辑sqoop-env.sh,添加如下变量(如果用到了hbase,可以再增加hbase的相关配置)
1 export HADOOP_COMMON_HOME=/opt/module/hadoop-2.7.7
2 export HADOOP_MAPRED_HOME=/opt/module/hadoop-2.7.7
3 export HIVE_HOME=/opt/module/hive
4 export ZOOKEEPER_HOME=/opt/module/zookeeper-3.4.10
5 export ZOOCFGDIR=/opt/module/zookeeper-3.4.10
3.拷贝jar包,一个是mysql的驱动包,还有一个可选的jar是hive-common.jar
4.测试链接(要启动mysql)
bin/sqoop list-databases --connect jdbc:mysql://hadoop002:3306/ --username 用户名 --password 密码或者使用-P这样会提示输入密码