随笔分类 -  Big Data

摘要:一、分布式一致性 基本问题 拜占庭将军问题,主要是两点: 1、无法保证信使不被暗杀,消息无法到达 2、无法保证信使是否叛徒,消息被更改 理论上的拜占庭问题无法达成消息一致,所以,退一步来考虑相对现实的场景:假设消息不被更改,那么就只考虑消息无法到达的问题了。 几个一致性算法 Paxos算法、<wiz 阅读全文
posted @ 2020-01-16 17:35 绿色冰点 阅读(868) 评论(0) 推荐(0) 编辑
摘要:转自:http://www.cnblogs.com/haippy/archive/2011/12/04/2276064.html LevelDb日知录之一:LevelDb 101 说起LevelDb也许您不清楚,但是如果作为IT工程师,不知道下面两位大神级别的工程师,那您的领导估计会Hold不住了: 阅读全文
posted @ 2019-05-11 11:56 绿色冰点 阅读(357) 评论(0) 推荐(0) 编辑
摘要:1.需求背景 移动互联网时代,海量的用户每天产生海量的数量,这些海量数据远不是一张表能Hold住的。比如 用户表:支付宝8亿,微信10亿。CITIC对公140万,对私8700万。 订单表:美团每天几千万,淘宝历史订单百亿、千亿。 交易流水表 2.选择方案 (1)NoSQL/NewSQL(不选择) 选 阅读全文
posted @ 2019-04-03 12:00 绿色冰点 阅读(409) 评论(0) 推荐(0) 编辑