随笔分类 - Big Data
摘要:一、分布式一致性 基本问题 拜占庭将军问题,主要是两点: 1、无法保证信使不被暗杀,消息无法到达 2、无法保证信使是否叛徒,消息被更改 理论上的拜占庭问题无法达成消息一致,所以,退一步来考虑相对现实的场景:假设消息不被更改,那么就只考虑消息无法到达的问题了。 几个一致性算法 Paxos算法、<wiz
阅读全文
摘要:转自:http://www.cnblogs.com/haippy/archive/2011/12/04/2276064.html LevelDb日知录之一:LevelDb 101 说起LevelDb也许您不清楚,但是如果作为IT工程师,不知道下面两位大神级别的工程师,那您的领导估计会Hold不住了:
阅读全文
摘要:1.需求背景 移动互联网时代,海量的用户每天产生海量的数量,这些海量数据远不是一张表能Hold住的。比如 用户表:支付宝8亿,微信10亿。CITIC对公140万,对私8700万。 订单表:美团每天几千万,淘宝历史订单百亿、千亿。 交易流水表 2.选择方案 (1)NoSQL/NewSQL(不选择) 选
阅读全文