2021年12月14日
摘要：
今日分享主题： 通过 requests 工具包向 flask 提供的接收测试环境 linux 的内存信息接口定时推送数据并在页面展示的实验。 Step1: flask端设计 1.表结构： 2.接收数据接口定义 3.提供页面查询接口，用于页面展示使用 4.将 Blueprint 注册到app上，重启服 阅读全文
摘要：
1. Hive 分桶表操作 1.1 数据分桶的定义 分桶是相对分区进行更细粒度的划分。 分桶将整个 hive 表数据内容按照某列属性值的 hash 值进行分区，通过分区将这些表数据划分到多个文件中进行存储。 其实桶的概念就是 MapReduce 分区的概念。物理上每个桶就是目录里的一个文件，一个任务 阅读全文
摘要：
一. 概念 Spring 提供两个核心功能： IoC—控制反转（Inversion of Control） Aop—面向切面编程（Aspect Oriented Program） IoC 有助于应用对象之间的解耦。 AOP 可以实现横切关注点（例如：日志、安全、缓存和事务管理）与他们所影响的对象之间 阅读全文
摘要：
1. Hive表数据的导入方式 1.1 本地上传至hdfs 命令： hdfs dfs -put [文件名] [hdfs绝对路径] 例如：测试文件 test_001.txt 内容如下 在 hdfs 绝对路径：/user/hive/warehouse/mytest.db/ 下有一张表 test_001， 阅读全文