摘要：
前言 漏洞描述 Apache Log4j2是一款优秀的Java日志框架。2021年11月24日，阿里云安全团队向Apache官方报告了Apache Log4j2远程代码执行漏洞。由于Apache Log4j2某些功能存在递归解析功能，攻击者可直接构造恶意请求，触发远程代码执行漏洞。漏洞利用无需特殊配 阅读全文
摘要：
Rule Based Optimizer(RBO)基于规则Cost Based Optimizer(CBO)基于成本，或者讲统计信息ORACLE 提供了CBO、RBO两种SQL优化器。CBO在ORACLE7 引入，但在ORACLE8i 中才成熟。ORACLE已经明确声明在ORACLE9i之后的版本中 阅读全文
摘要：
一、Presto Presto是Facebook开源的，完全基于内存的并⾏计算，分布式SQL交互式查询引擎是它被设计用来专门处理高速，实时的数据分析。Presto本身不存储数据，但是可以接入多种数据源，并且支持跨数据源的级联查询。与MySQL对比：MySQL首先是一个单点关系型数据库，其具有存储和计 阅读全文
摘要：
Spark和MapReduce都是用来处理海量数据，但是在处理方式和处理速度上却不同。第一，spark处理数据是基于内存的，而MapReduce是基于磁盘处理数据的。 MapReduce是将中间结果保存到磁盘中，减少了内存占用，牺牲了计算性能。 Spark是将计算的中间结果保存到内存中，可以反复利用 阅读全文
摘要：
Presto比Spark SQL更快或更慢，取决于您正在执行的查询类型，环境和引擎调整参数。 相同点 不同点 presto和spark sql都是MPP(massively parallel processing)架构（Presto/Impala/SparkSQL/Drill等）， 有很好的数据量和 阅读全文
摘要：
最近在做一个数据关联处理分析需求，涉及left表right表LEFT JOIN，发现LEFT JOIN后的结果条数比left表的记录多不少。 于是查看结果明细发现最终的结果，不少都是重复的。 最终确定是left 表和right表是一对多的关系，或者说right表有重复的记录也是一样的效果。 于在本地 阅读全文
摘要：
spark-submit 命令：在spark安装目录的bin目录下有一个spark-submit脚本，可以用来提交运行spark程序如果配置了spark的path可以直接使用spark-submit命令 编译构建spark程序使用sbt 或者maven构建程序生成jar包spark-submit的使 阅读全文
摘要：
“截屏”工具栏 QuickTime Player Soundflower 使用“截屏”工具栏 要查看“截屏”工具栏，请同时按下以下三个按键：Shift、Command 和 5。您将看到用于录制整个屏幕、录制屏幕的选定部分或拍摄屏幕静态图像的屏幕控制项： 录制整个屏幕 点按屏幕控制项中的 。指针会变为 阅读全文
摘要：
OLAP（On-Line Analytical Processing）联机分析处理，也称为面向交易的处理过程，其基本特征是前台接收的用户数据可以立即传送到计算中心进行处理，并在很短的时间内给出处理结果，是对用户操作快速响应的方式之一。应用在数据仓库，使用对象是决策者。OLAP系统强调的是数据分析，响 阅读全文
摘要：
一、OLAP一般分为即席查询和固化查询 即席查询：用户根据自己的需求，灵活的选择查询条件，系统根据用户的选择生成相应的统计报表。普通应用查询是定制开发的，即席查询是用户自定义查询条件，快速的执行自定义SQL（通过手写sql完成一些临时的数据分析需求，这类sql形式多变、逻辑复杂，对查询时间没有严格要 阅读全文