上一页 1 ··· 5 6 7 8 9 10 11 12 13 ··· 53 下一页

HyPer: A Hybrid OLTP&OLAP Main Memory Database System Based on Virtual Memory Snapshots

摘要: HyPer也是内存数据库 传统数据库基本都是TP,后续出现BI的需求,即AP的需求,传统数据库满足不了 所以出现了数仓,但是需要ETL把TP的数据同步到数仓中,进行AP 哪怕基于列存的实时数仓,也要针对Tp和AP用不同的存储引擎 总之如果要用一套数据结构和系统同时支持TP和AP,之前是没有能做到的 阅读全文
posted @ 2020-01-17 20:10 fxjwind 阅读(726) 评论(0) 推荐(0) 编辑

Redo,Undo,Binlog

摘要: https://www.jianshu.com/p/d829df873332 https://www.jianshu.com/p/57c510f4ec28 对于面向disk的数据库, 需要把数据先写入到page中,然后成批的flush到磁盘,所以在Page没有flush前需要有log能记录下page 阅读全文
posted @ 2020-01-17 12:31 fxjwind 阅读(582) 评论(0) 推荐(0) 编辑

Hekaton: SQL Server’s Memory-Optimized OLTP Engine

摘要: Hekaton是内存数据库,以往的数据库都是基于磁盘构建的, 但是当前硬件的发展,已经可以将很多应用的数据整个放到内存中,所以需要新的架构,基于超大内存和多核CPU的数据库架构 当前目标是把Sql Server的性能提升100倍 那么提升的办法,一般有3种,提升scalability,提升CPI,或 阅读全文
posted @ 2020-01-15 18:09 fxjwind 阅读(428) 评论(0) 推荐(0) 编辑

依赖注入

摘要: Dagger2,这篇对于依赖注入的概率讲的还是很清晰的,mark https://zhuanlan.zhihu.com/p/24454466 Guice https://zhuanlan.zhihu.com/p/32299568 阅读全文
posted @ 2020-01-07 18:11 fxjwind 阅读(130) 评论(0) 推荐(0) 编辑

SAP HANA Database - Data Management for Modern Business Applications

摘要: 简单的看下架构, 分成几个部分, Connection And Session The Connection and Session Management component creates and manages sessions and connections for the database 阅读全文
posted @ 2020-01-06 16:45 fxjwind 阅读(431) 评论(0) 推荐(0) 编辑

Impala: A Modern, Open-Source SQL Engine for Hadoop

摘要: Impala is an open-source, fully-integrated, state-of-the-art MPP SQL query engine designed speci cally to leverage the flexibility and scalability of 阅读全文
posted @ 2019-12-26 18:08 fxjwind 阅读(339) 评论(0) 推荐(0) 编辑

The Vertica Analytic Database: CStore 7 Years Later

摘要: Vertica作为C-Store项目的商业化实现,所有前置论文C-Store要先看下 The Vertica Analytic Database (Vertica) is a distributed massively parallel RDBMS system that commercialize 阅读全文
posted @ 2019-12-25 11:46 fxjwind 阅读(445) 评论(0) 推荐(0) 编辑

Amazon Redshift and the Case for Simpler Data Warehouses

摘要: Redshift是Amazon一个商业产品上的进化 但并不是技术的进化,他使用的无非都是传统数仓领域的技术 如果说创新,就是大量使用Amazon本身的云服务的云原生架构,大大提升的产品的迭代速度,可维护性,管控能力,当然前提是Amazon有那么好的基础设施可以用 架构 DataPlane 典型的Sh 阅读全文
posted @ 2019-12-23 15:16 fxjwind 阅读(430) 评论(0) 推荐(0) 编辑

C-Store: A Column-oriented DBMS Mike

摘要: 这篇paper比较老,是列存比较基础的论文 几乎所有列存,或olap的论文都会引用这篇 行存面向写,支持OLTP 列存面向读,支持OLAP 基于磁盘的DBMS,瓶颈基本在磁盘IO,所有做的工作都是用多余的cpu来换取磁盘IO 总体的思路,压缩让需要存的数据更小,densepack,更多的数据一起存, 阅读全文
posted @ 2019-12-20 12:30 fxjwind 阅读(662) 评论(0) 推荐(0) 编辑

Apache Kylin 简介

摘要: http://kylin.apache.org/docs/index.html https://www.infoq.cn/article/vOrjsJCgVAVPim5hsj6p Kylin 的核心思想是预计算,将数据按照指定的维度和指标,预先计算出所有可能的查询结果,利用空间换时间来加速查询模式固 阅读全文
posted @ 2019-12-18 14:06 fxjwind 阅读(915) 评论(0) 推荐(0) 编辑
上一页 1 ··· 5 6 7 8 9 10 11 12 13 ··· 53 下一页