摘要: 1.顺序读写 kafka 顺序读写快 & hbase 随机读写快>>> kafka消息不断追加,可以充分利用磁盘的顺序读写性能 不需要硬盘磁头的寻道时间,只需要很少的扇区旋转时间,速度远快于随机 >>> hbase因为先找缓存,和HDFS比快 2.零拷贝 见:https://segmentfault 阅读全文
posted @ 2020-12-07 23:30 PEAR2020 阅读(538) 评论(0) 推荐(0) 编辑
摘要: PASS (hash打散,加盐打散,md5打散) => 1)为了数据能有效分散在hadoop节点上 2)考虑怎么找?一般用md5,(姓名+身份证)两次hash,再hash法,能保证尽量分布 阅读全文
posted @ 2020-12-07 22:28 PEAR2020 阅读(101) 评论(0) 推荐(0) 编辑
摘要: 一、选举制度 1.第一次选举:超 > 半数选举,判断leader的标准:myid 详细见:https://blog.csdn.net/weixin_43291055/article/details/95451357 2.宕机选举:每个zk:(myid,zxid) 只要超过半数的节点正常,集群就能正常 阅读全文
posted @ 2020-12-07 11:50 PEAR2020 阅读(1031) 评论(0) 推荐(0) 编辑