2016年10月26日

Bigtable:一个分布式的结构化数据存储系统

摘要: Bigtable:一个分布式的结构化数据存储系统 摘要 Bigtable是一个管理结构化数据的分布式存储系统,它被设计用来处理海量数据:分布在数千台通用服务器上的PB级的数据。Google的很多项目将数据存储在Bigtable中,包括Web索引、Google Earth、Google Finance 阅读全文

posted @ 2016-10-26 20:46 李玉龙 阅读(2277) 评论(0) 推荐(0) 编辑

The Google File System 中文版

摘要: 摘要 我们设计并实现了Google文件系统,一个面向分布式数据密集型应用的、可伸缩的分布式文件系统。虽然运行在廉价的日用硬件设备上,但是它依然了提供容错功能,为大量客户机提供了很高的总体性能。 虽然与很多之前的分布式文件系统有很多相同目标,但是,我们的设计已经受应用的负载情况和技术环境影响,现在以及 阅读全文

posted @ 2016-10-26 20:45 李玉龙 阅读(4730) 评论(0) 推荐(0) 编辑

HIVE和HBASE区别

摘要: HIVE和HBASE区别 1. 两者分别是什么? Apache Hive是一个构建在Hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言,这种语言最终被转化为Map/Reduce. 虽然Hive提供了SQL查询功能,但是Hive不能够 阅读全文

posted @ 2016-10-26 20:38 李玉龙 阅读(391) 评论(0) 推荐(0) 编辑

区分 hdfs hbase hive hbase适用场景

摘要: 区分 hdfs hbase hive hbase适用场景 收藏 八戒_o 发表于 11个月前 阅读 308 收藏 1 点赞 0 评论 0 区分 hdfs hbase hive hbase适用场景 收藏 八戒_o 发表于 11个月前 阅读 308 收藏 1 点赞 0 评论 0 收藏 收藏 八戒_o 发 阅读全文

posted @ 2016-10-26 20:36 李玉龙 阅读(19450) 评论(0) 推荐(1) 编辑

HDFS Hbase

摘要: Hbase:Hbase是Hadoop的数据库,是bigtable的实现,基于HDFSHDFS:文件系统,是gfs的实现 Hive,Hbase,HDFS等之间的关系Hive:Hive不支持更改数据的操作,Hive基于数据仓库,提供静态数据的动态查询。其使用类SQL语言,底层经过编译转为MapReduc 阅读全文

posted @ 2016-10-26 20:33 李玉龙 阅读(471) 评论(0) 推荐(0) 编辑

raft动画

摘要: http://thesecretlivesofdata.com/raft/ 阅读全文

posted @ 2016-10-26 10:35 李玉龙 阅读(265) 评论(0) 推荐(0) 编辑

NWR协议

摘要: NWR是一种在分布式存储系统中用于控制一致性级别的一种策略。在Amazon的Dynamo云存储系统中,就应用NWR来控制一致性。 让我们先来看看这三个字母的含义:N:在分布式存储系统中,有多少份备份数据W:代表一次成功的更新操作要求至少有w份数据写入成功R: 代表一次成功的读数据操作要求至少有R份数 阅读全文

posted @ 2016-10-26 09:46 李玉龙 阅读(3280) 评论(0) 推荐(0) 编辑

导航