2021/9/12

需要安装sqoop

1）上传sqoop压缩包并解压 sqoop 安装包到指定目录，如：
$ tar -zxf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /opt/module/

2) 在 sqoop 目录下的 conf 目录，重命名配置文件
$ mv sqoop-env-template.sh sqoop-env.sh

3) 修改配置文件sqoop-env.sh

export HADOOP_COMMON_HOME=/opt/module/hadoop-2.7.2
export HADOOP_MAPRED_HOME=/opt/module/hadoop-2.7.2
export HIVE_HOME=/opt/module/hive
export ZOOKEEPER_HOME=/opt/module/zookeeper-3.4.10
export ZOOCFGDIR=/opt/module/zookeeper-3.4.10
export HBASE_HOME=/opt/module/hbase

4)拷贝 jdbc 驱动到 sqoop 的 lib 目录下

5)验证 Sqoop,在sqoop目录下
bin/sqoop help

6）测试 Sqoop 是否能够成功连接数据库（根据自己数据库情况）
bin/sqoop list-databases --connect jdbc:mysql://node01:3306/ --username root --password 000000

 

7)在navicat中建数据库和表

8）导出到mysql
bin/sqoop export \
--connect jdbc:mysql://node01:3306/homework \
--username root \
--password hadoop \
--table lingshou_csv \
--num-mappers 1 \
--export-dir /user/hive/warehouse/lingshou_csv \
--input-fields-terminated-by ","