摘要: 前言这篇文章主要是用sqoop从mysql导入数据到hive时遇到的坑的总结。环境:系统:Centos 6.5Hadoop:Apache,2.7.3Mysql:5.1.73JDK:1.8Sqoop:1.4.7Hadoop以伪分布式模式运行。一、使用的导入命令我主要是参考一篇文章去测试的,Sqoop: Import Data From MySQL to Hive。参照里面的方法,在mysql建了表,... 阅读全文
posted @ 2018-05-18 17:19 大师兄啊哈 阅读(15263) 评论(0) 推荐(0) 编辑
摘要: 一、sqoop简介 Sqoop是一款开源的工具,主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql...)间进行数据的传递,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数 阅读全文
posted @ 2018-05-18 16:40 大师兄啊哈 阅读(1809) 评论(0) 推荐(0) 编辑