04 2013 档案

Tair的桶分布策略介绍及新的机器级位置安全优先策略实现
摘要：Tair在其intro wiki 上介绍了其现有的桶分布策略： 程序提供了两种生成分配表的策略, 一种叫做负载均衡优先, 一种叫做位置安全优先。 负载均衡优先 当采用负载优先策略的时候, config server会尽量的把桶均匀的分布到各个data server上. 所谓尽量是指在不违背下面的原则的条件下尽量负载均衡. 1 每个桶必须有COPY_COUNT份数据 2 一个桶的各份数据不能在同一台主机上; 位置安全优先 位置安全优先原则是说, 在不违背上面两个原则的条件下, 还要满足位置安全条件, 然后再考虑负载均衡. 位置信息的获取是通过 _pos_mask(参见安装部署文档中... 阅读全文
posted @ 2013-04-26 19:09 刘浩de技术博客 阅读(1821) 评论(0) 推荐(0) 编辑
[备忘]记录下内存分配相关的一些文章资料
摘要：这两天线上的一个服务出现了内存问题，表现在使用top查看进程的RES会间断性的突然上升，而且从不下降。仔细review了线上的代码，没有发现内存泄漏，怀疑和glibc的内存分配机制有关，glibc并没有及时将内存释放给操作系统。可以自行使用如下的测试代码进行下验证，会发现使用默认的glibc和google提供的tc_malloc，map吃掉的内存在离开自己的scope后并没有吐给操作系统，使用jemalloc没有如上问题。线上的代码已经重新用jemalloc编译推动上线了，还处在观察阶段。#include <malloc.h>#include <map>#include 阅读全文
posted @ 2013-04-24 13:55 刘浩de技术博客 阅读(2092) 评论(3) 推荐(2) 编辑
Tair监控及统计技巧
摘要：Tair是淘宝自主开发的一个分布式 key/value 存储系统。Tair 分为持久化和非持久化两种使用方式. 非持久化的 Tair 可以看成是一个分布式缓存. 持久化的 Tair 将数据存放于磁盘中. 为了解决磁盘损坏导致数据丢失, Tair 可以配置数据的备份数目, Tair 自动将一份数据的不同备份放到不同的主机上, 当有主机发生异常, 无法正常提供服务的时候, 其于的备份会继续提供服务.项目主页参见：淘宝Tair. 受NoSQLFan上的一遍文章Redis监控技巧 一文的启发，本文系统的总结下我们在生产环境使用Tair时进行的各类监控和统计，希望对开源社区有所回馈。 Tair最直接.. 阅读全文
posted @ 2013-04-11 20:30 刘浩de技术博客 阅读(5219) 评论(4) 推荐(3) 编辑

点击右上角即可分享
微信分享提示