摘要: sqoop是单机工具 1.上传 tar 包 解压 tar -zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz 2.配置环境变量 a .进入sqoop 目录下 pwd 复制路径 /root/Downloads/sqoop-1.4.6.bin__hadoop 阅读全文
posted @ 2019-05-18 21:52 lilixia 阅读(208) 评论(0) 推荐(0) 编辑
摘要: sqoop 常用命令 一、Sqoop与MySQL 1.列出mysql数据库中的所有数据库 sqoop list-databases -connect jdbc:mysql://192.168.1.10:3306 -username root -password root 注意: 以下URL写法,都可 阅读全文
posted @ 2019-05-18 21:21 lilixia 阅读(7790) 评论(0) 推荐(2) 编辑
摘要: Sqoop教案 1. Sqoop介绍 Apache Sqoop(SQL-to-Hadoop) 项目旨在协助 RDBMS 与 Hadoop 之间进行高效的大数据交流。用户可以在 Sqoop 的帮助下,轻松地把关系型数据库的数据导入到 Hadoop 与其相关的系统 (如HBase和Hive)中;同时也可 阅读全文
posted @ 2019-05-18 20:58 lilixia 阅读(215) 评论(0) 推荐(0) 编辑
摘要: //将从hbas数据库中用mr读取的数据放入到 hdfs中 注:引入 jar 包 //使用mr 将hbase数据库中的单词计算出来 创建表 wordcount 放入4条数据 在eclipce中 // 先从hdfs上将数据拿出来,再放入hbase数据库中 a.将数据放入工程中 还有jar 都需要导入 阅读全文
posted @ 2019-05-18 17:06 lilixia 阅读(989) 评论(0) 推荐(1) 编辑
摘要: 四种过滤器 1、行键 过滤器 2、 前缀过滤器 3、 时间戳过滤器 4、 列族过滤器 阅读全文
posted @ 2019-05-18 11:33 lilixia 阅读(2119) 评论(0) 推荐(0) 编辑
摘要: 使用java API方法 对hbase的操作 创建hbase表 添加数据 批量添加 查询 扫描数据 注:必须导入依赖的jar 1.使用API创建表 2.put 添加数据 注:去集群中查看 是否添加成功 添加之前将集群都启动 扫描表 scan 'Nurse' 3.Batch批量添加 循环添加 去集群查 阅读全文
posted @ 2019-05-18 09:20 lilixia 阅读(1028) 评论(0) 推荐(0) 编辑