2020年5月25日
摘要: 可以使用sqoop help命令来查看sqoop支持哪些命令 1.列举mysql有多少个数据库 sqoop list-databases \ --connect jdbc:mysql://localhost:3306 \ --username root \ --password root 2.列举某 阅读全文
posted @ 2020-05-25 15:18 wnwn 阅读(255) 评论(0) 推荐(0) 编辑
摘要: 1.sqoop概述 sqoop是Apache旗下一款hadoop和关系数据库服务器之间传送数据的工具; 核心的功能: 导入,迁入(从关系型数据库-->hdfs hive hbase) 导出,迁出(从hdfs hive hbase-->关系型数据库) 导入数据:mysql,Oracle导入数据到had 阅读全文
posted @ 2020-05-25 13:53 wnwn 阅读(175) 评论(0) 推荐(0) 编辑
摘要: 1.介绍 Hive提供了与HBase的集成,使得能够在HBase表上使用HQL语句进行查询 插入操作以及进行Join和Union等复杂查询,同时也可以将hive表中的数据映射到HBase中; 2.模型概念 2.1 将ETL操作的数据存入HBase 2.2 HBase作为Hive的数据源 2.3 构建 阅读全文
posted @ 2020-05-25 13:46 wnwn 阅读(285) 评论(0) 推荐(0) 编辑