2021年12月15日
【大数据面试】【项目】数仓架构：离线、实时、数仓输入输出、选型、版本、服务器、集群规模、数据保存、组件安装分配
摘要： 一、质疑分层不合理 云上大数据数仓解决方案：https://www.aliyun.com/solution/datavexpo/datawarehouse 1、离线数仓--基于hive 2、实时数仓--基于kafka中间件 每一步都会缓存至datahub 二、数仓概念 1、数仓的数据源和输出系统分别 阅读全文
posted @ 2021-12-15 22:20 哥们要飞 阅读(449) 评论(0) 推荐(0) 编辑
【大数据面试】sqoop：空值、数据一致性、列式存储导出、数据量、数据倾斜
摘要： 一、有没有遇到过问题，怎么进行解决的 1、空值问题 本质：hive底层存储空数据使用\n《==》MySQL存储空数据使用null 解决：双向导入均分别使用两个参数☆，之前讲过 2、数据一致性问题 Hive ==》 MySQL 默认是4个map 2个成功，2个失败 原则：数据可以没有，但不能有错误 原 阅读全文
posted @ 2021-12-15 16:20 哥们要飞 阅读(692) 评论(0) 推荐(0) 编辑
【每日一题】【集合非空判断】【逻辑运算符】2021年12月15日-144. 二叉树的前序遍历
摘要： /** * Definition for a binary tree node. * public class TreeNode { * int val; * TreeNode left; * TreeNode right; * TreeNode() {} * TreeNode(int val) { 阅读全文
posted @ 2021-12-15 15:31 哥们要飞 阅读(19) 评论(0) 推荐(0) 编辑
【每日一题】2021年12月14日-82. 删除排序链表中的重复元素 II
摘要： 存在一个按升序排列的链表，给你这个链表的头节点 head ，请你删除链表中所有存在数字重复情况的节点，只保留原始链表中 没有重复出现 的数字。 返回同样按升序排列的结果链表。 来源：力扣（LeetCode）链接：https://leetcode-cn.com/problems/remove-dupl 阅读全文
posted @ 2021-12-15 08:59 哥们要飞 阅读(27) 评论(0) 推荐(0) 编辑