哥们要飞的blog

摘要： 〇、概述 1、实现内容 使用Hive SQL编程，构造分层离线数仓 并可以通过Quick Bi进行展示 2、过程 （1）数据接⼊到ODS层 （2）进⾏ODS到DWD层数据开发 （3）进⾏ODS到DIM层数据开发 a.创建 【电商_商家维度表_⽇】表 b.创建【电商_商品维度表_⽇】表 c.创建【电商 阅读全文

摘要： 描述给定一个二叉树的根节点root，该树的节点值都在数字0−9 之间，每一条从根节点到叶子节点的路径都可以用一个数字表示。1.该题路径定义为从树的根结点开始往下一直到叶子结点所经过的结点2.叶子节点是指没有子节点的节点3.路径只能从父节点到子节点，不能从子节点到父节点4.总节点数目为n 例如根节点到 阅读全文

摘要： 〇、概述 1、工具 http://www.dooccn.com/python3/ 在线运行Python代码 2、步骤 （1）⽣成代码测试数据 （2）编写Mapper逻辑 （3）编写Reducer逻辑 （4）提交并执行 一、⽣成代码测试数据 运行代码，输出50个人，分别购买3种商品的数据 代码： #! 阅读全文

摘要： 描述给定一个链表，请判断该链表是否为回文结构。回文是指该字符串正序逆序完全一致。 思路： public boolean isPail (ListNode head) { ListNode node = head; LinkedList<Integer> list = new LinkedList<> 阅读全文

摘要： 描述给定一个十进制数 M ，以及需要转换的进制数 N 。将十进制数 M 转化为 N 进制数。 当 N 大于 10 以后， 应在结果中使用大写字母表示大于 10 的一位，如 'A' 表示此位为 10 ， 'B' 表示此位为 11 。 若 M 为负数，应在结果中保留负号。 思路：map记录对应的值，ke 阅读全文

摘要： 描述给定一个字符串数组，再给定整数 k ，请返回出现次数前k名的字符串和对应的次数。返回的答案应该按字符串出现频率由高到低排序。如果不同的字符串有相同出现频率，按字典序排序。对于两个字符串，大小关系取决于两个字符串从左到右第一个不同字符的 ASCII 值的大小关系。比如"ah1x"小于"ahb"，" 阅读全文

摘要： 〇、老师及课程介绍 一、今日内容 二、实时计算理论解析 1、什么是实时计算 微批处理、流式处理、实时计算 水流和车流的例子 spark streaming就是一种微批处理，水满了才处理，进入下一个地方 流式计算：没有等待 深入：红绿灯交替的场景是微批处理，就不是流式计算了 水流的场景是流式计算时：直 阅读全文

摘要： 一、内容介绍 昨日福利：大数据反杀熟 今日：数据看板 离线分析及DW数据仓库 明日：实时计算框架及全流程 一、数仓定义及演进史 1、概念 生活中解答 2、数据仓库的理解 对比商品仓库 3、数仓分层内容 （1）层数不要过多，会冗余 （2）好处 提高效率，便于复用 4、数仓的演进过程 （1）演进 OLT 阅读全文

摘要： 一、含义 UNION 操作符用于合并两个或多个 SELECT 语句的结果集。 UNION 内部的 SELECT 语句必须拥有相同数量的列。列也必须拥有相似的数据类型。同时，每条 SELECT 语句中的列的顺序必须相同。 注意：列名不一定相同！ 二、语法 三、例子 1、表结构 2、使用 UNION 命 阅读全文

摘要： 一、含义 基于表之间的共同字段，把来自两个或多个表的行结合起来 二、分类 内连接：join / inner join 外连接：left join / right join / full outer join 二、语法 select xxx from 表1 join 表2 on 表1.A = 表2.A 阅读全文