随笔分类 - 数据存储与技术
必修课程
摘要:课程大纲 判断对错、名词解释、问答、计算 数据硬件组成 数据存取途径是指从数据源到目的地数据和命令传输的路径 。 数源据和目的地通常是存储器或存储设备。 介于两端之间的物理器件便组成了存取途径的硬件系统。 总线 总线是连接设备的通信通道,包括数据总线、地址总线、控制总线(避免多个CPU操作同一块内存
阅读全文
摘要:纠删码(Erasure Code)中的数学知识 背景 在数据存储领域,Hadoop采用三副本策略有效的解决了存储的容错问题,但是三副本策略中磁盘的利用效率比较低,仅有33%,而且副本带来的成本压力实在太高,后来适时的出现了纠删码的概念。当冗余级别为n+m时,将这些数据块分别存放在n+m个硬盘上,这样
阅读全文
摘要:现在全闪存阵列已经见怪不怪了,EMC的XtremIO,还有VNX-F(Rockies),IBM FlashSystem。全闪存真正为效率而生,重新定义存储速度。凭借极致性能,高可用性,为您极大提高企业级应用效率。提到闪存的优势,那么毋庸置疑的就是速度!而在速度优势背后,SSD则面临着价格、容量以及寿
阅读全文
摘要:一.Spanner功能概要 Spanner具有高扩展性,多版本(multi-version)、世界级分布(globally-distributed)及同步复制(synchronously-replicated)等特性。 Spanner立足于高抽象层次,使用Paxos协议横跨多个数据集把数据分散到世界
阅读全文