摘要: 一、下载ycsb 0.10包 https://github.com/brianfrankcooper/YCSB/releases/download/0.10.0/ycsb-0.10.0.tar.gz 二、上传到linux,解压 tar -zxvf ycsb-0.10.0.tar.gz 三、YSCB压 阅读全文
posted @ 2019-02-21 13:09 xiaolaotou 阅读(2168) 评论(0) 推荐(0) 编辑
摘要: 来源:https://blog.csdn.net/qq_38941937/article/details/81625691 1、使用decode判断字符串是否一样 decode(value,if1,then1,if2,then2,if3,then3,...,else) 含义为 IF 条件=值1 TH 阅读全文
posted @ 2019-02-21 13:01 xiaolaotou 阅读(62880) 评论(0) 推荐(0) 编辑
摘要: NVL(表达式1,表达式2) 如果表达式1为空值,NVL返回值为表达式2的值,否则返回表达式1的值。 该函数的目的是把一个空值(null)转换成一个实际的值。其表达式的值可以是数字型、字符型和日期型。但是表达式1和表达式2的数据类型必须为同一个类型。 对数字型: NVL( comm,0); 对字符型 阅读全文
posted @ 2019-02-21 12:58 xiaolaotou 阅读(1982) 评论(0) 推荐(0) 编辑
摘要: 实例一:来源: https://www.cnblogs.com/kimbo/p/6208973.html 行转列 (对某列拆分,一列拆多行) 使用函数:lateral view explode(split(column, ',')) num eg: 如表:t_row_to_column_tmp 数据 阅读全文
posted @ 2019-02-21 12:51 xiaolaotou 阅读(2363) 评论(0) 推荐(0) 编辑
摘要: case具有两种格式,简单case函数和case搜索函数 case函数只返回第一个符合条件的值,剩下的case部分将会被自动忽略 1、简单函数 CASE sex WHEN '1' THEN '男' WHEN '2' THEN '女' ELSE '其他' END 2、搜索函数 CASE WHEN se 阅读全文
posted @ 2019-02-21 12:43 xiaolaotou 阅读(3403) 评论(0) 推荐(0) 编辑
摘要: 一、 分区函数Partition By与row_number()、rank()、dense_rank()的用法(获取分组(分区)中前几条记录) 一、数据准备 --1、创建学生成绩表 id int, --主键 Grade int, --班级 Score int --分数 id int, --主键 Gr 阅读全文
posted @ 2019-02-21 12:40 xiaolaotou 阅读(3421) 评论(0) 推荐(0) 编辑
摘要: 下图展示了 LEFT JOIN、RIGHT JOIN、INNER JOIN、OUTER JOIN 相关的 7 种用法. 阅读全文
posted @ 2019-02-21 11:53 xiaolaotou 阅读(604) 评论(0) 推荐(0) 编辑
摘要: Sqoop: 1、sqoop从数据库中导入数据到HDFS 2、SQOOP从数据库导入数据到hive 3、sqoop从hive中将数据导出到数据库 sqoop底层还是执行的mapreduce程序,,但是特殊的地方只有map TASK 可以实现:企业级数据仓库、文档型系统、关系型数据库<--> sqoo 阅读全文
posted @ 2019-02-21 11:47 xiaolaotou 阅读(764) 评论(0) 推荐(0) 编辑
摘要: flume伪分布式安装: 1、导包:apache-flume-1.7.0-bin.tar.gz 2、配置环境变量:/etc/profile export FLUME_HOME=/yang/apache-flume-1.7.0-bin export PATH=$PATH:$FLUME_HOME/bin 阅读全文
posted @ 2019-02-21 11:39 xiaolaotou 阅读(383) 评论(0) 推荐(0) 编辑
摘要: 一、flume集成hdfs,将数据写入到hdfs a1.sources = r1 a1.sinks = k1 a1.channels = c1 a1.sources.r1.type =avro a1.sources.r1.bind=0.0.0.0 a1.sources.r1.port=8888 #存 阅读全文
posted @ 2019-02-21 11:31 xiaolaotou 阅读(387) 评论(0) 推荐(0) 编辑