随笔分类 -  sqoop

摘要:安装hive 1、下载hive-2.1.1(搭配hadoop版本为2.7.3) 2、解压到文件夹下 /wdcloud/app/hive-2.1.1 3、配置环境变量 4、在mysql上创建元数据库hive_metastore编码选latin,并授权 5、新建hive-site.xml,内容如下: < 阅读全文
posted @ 2017-01-24 16:53 Aviva_ye 阅读(1771) 评论(0) 推荐(0) 编辑
摘要:导入命令 说明:--connect jdbc:mysql://192.168.200.250:3306/sqoop 表示远程或者本地 Mysql 服务的URI,3306是Mysql默认监听端口, sqoop 是数据库,若是其他数据库,如Oracle,只需修改URI即可。--table widgets 阅读全文
posted @ 2017-01-24 15:10 Aviva_ye 阅读(398) 评论(0) 推荐(0) 编辑
摘要:P573 从mysql导入数据到hdfs 第一步:在mysql中创建待导入的数据 1、创建数据库并允许所有用户访问该数据库 mysql -h 192.168.200.250 -u root -p 2、创建表widgets 3、导入测试数据 第二步:执行sqoop导入命令 缺少mysql连接器 先导入 阅读全文
posted @ 2017-01-24 14:19 Aviva_ye 阅读(1961) 评论(0) 推荐(0) 编辑
摘要:1、创建mysql数据库、表、以及测试数据mysql> desc test;+ + + + + + +| Field | Type | Null | Key | Default | Extra |+ + + + + + +| id | int(11) | NO | PRI | NULL | auto 阅读全文
posted @ 2016-12-19 13:32 Aviva_ye 阅读(716) 评论(0) 推荐(0) 编辑
摘要:一、创建一个mysql的link MySQL链接使用的是JDBC,必须有对应的驱动文件jar,还得有对应的访问权限,请确保能在server端访问MySQL。确保mysql的jar包已经导入到${SQOOP_HOME}/server/lib/目录下。 例子: sqoop:000> create lin 阅读全文
posted @ 2016-12-19 13:27 Aviva_ye 阅读(8187) 评论(0) 推荐(0) 编辑
摘要:官网文档:http://sqoop.apache.org/docs/1.99.7/user/CommandLineClient.html#delete-link-function 一、了解sqoop数据导入的几个重要概念 二、几个常用的重要命令 三、查看 查看服务器 查看版本 查看内置连接器 其他查 阅读全文
posted @ 2016-12-19 11:49 Aviva_ye 阅读(2567) 评论(0) 推荐(0) 编辑
摘要:一、简介 官网: 版本: 二、安装配置 下载版本: 安装:直接解压放在任意目录即可。 sqoop目录 配置 (1)安装Java JDK 版本 [root@hadoop-allinone-200-123 hadoop-2.7.3]# java -versionjava version "1.7.0_6 阅读全文
posted @ 2016-12-19 10:19 Aviva_ye 阅读(7518) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示