上一页 1 ··· 24 25 26 27 28 29 30 31 32 ··· 49 下一页
摘要: OLAP 联机分析处理OLAP(On-Line Analytical Processing); OLAP是数据仓库系统的主要应用,支持复杂的分析操作,侧重决策支持,并且提供直观易懂的查询结果。通俗的讲,就是对数据按不同维度的聚合,维度的上钻,下卷等。【1】 OLTP 联机事务处理OLTP(on-li 阅读全文
posted @ 2020-04-11 09:50 抽象Java 阅读(258) 评论(0) 推荐(0) 编辑
摘要: 创建表格 hive> CREATE TABLE student(id INT, name STRING) ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t'; 导入数据 load data local inpath '/home/testData/dataT 阅读全文
posted @ 2020-04-10 14:00 抽象Java 阅读(377) 评论(0) 推荐(0) 编辑
摘要: 需求分析 阿里云技术框架 技术选型 系统架构 业务流程 数据表结构 ODS (操作性数据) 到 DWD (data warehouse detail) 层的业务流程 DWD 到 ADS 阅读全文
posted @ 2020-04-09 22:05 抽象Java 阅读(239) 评论(0) 推荐(0) 编辑
摘要: 技术选型 阅读全文
posted @ 2020-04-08 20:36 抽象Java 阅读(464) 评论(0) 推荐(0) 编辑
摘要: 事实表类型 阅读全文
posted @ 2020-04-06 21:54 抽象Java 阅读(378) 评论(0) 推荐(0) 编辑
摘要: https://www.iteblog.com/archives/2486.html#_Rowkey 解决热点问题 https://cloud.tencent.com/developer/article/1080103 https://www.cnblogs.com/bdifn/p/3801737. 阅读全文
posted @ 2020-04-05 12:18 抽象Java 阅读(152) 评论(0) 推荐(0) 编辑
摘要: 1、修改spark-env.sh 添加HADOOP_CONF_DIR 或者YARN_CONF_DIR 环境变量 2、 作业提交 yarn 创建hdfs test 目录 bin/hdfs dfs -mkdir /test 本地日志上传 hdfs test目录 bin/hdfs dfs -put djt 阅读全文
posted @ 2020-03-30 20:28 抽象Java 阅读(285) 评论(0) 推荐(0) 编辑
摘要: 1、collection [1] public static void main(String[] args) { Map<String, Info> map = new HashMap<>(); Info info1 = new Info("xxxx", "hhhh", "1980-11-01") 阅读全文
posted @ 2020-03-25 09:05 抽象Java 阅读(130) 评论(0) 推荐(0) 编辑
摘要: https://blog.csdn.net/meihao5/article/details/81084876?depth_1-utm_source=distribute.pc_relevant.none-task&utm_source=distribute.pc_relevant.none-task 阅读全文
posted @ 2020-03-25 00:24 抽象Java 阅读(116) 评论(0) 推荐(0) 编辑
摘要: case 1、例: select u.uid,case when u.birthday>='1990' and u.birthday<='1999' then '90 后' when u.birthday>='1980' and u.birthday<='1989' then '80 后' when 阅读全文
posted @ 2020-03-19 23:58 抽象Java 阅读(182) 评论(0) 推荐(0) 编辑
上一页 1 ··· 24 25 26 27 28 29 30 31 32 ··· 49 下一页