2012 年 10月随笔档案 - 大圆那些事

10 2012 档案

摘要：HBase集群（版本为0.94.0）运行过程中，发现5台Region Server的网络出口带宽经常维持在100MB/s以上，接近到网卡的极限；同时Region Server的机器load负载也很高，高峰时候能够达到30~50。本文将详细描述该问题的发现及排查解决过程。阅读全文

posted @ 2012-10-17 10:32 大圆那些事阅读(8843) 评论(5) 推荐(0) 编辑

摘要：HBase客户端API提供了Write Buffer的方式，即批量提交一批Put对象到HBase服务端。本文将结合HBase相关源码，对其进行深入介绍，分析如何在实际项目中合理设置和使用它。阅读全文

posted @ 2012-10-16 22:17 大圆那些事阅读(6631) 评论(4) 推荐(0) 编辑

摘要：多维分析技术是一种被广泛应用的数据分析技术，本人在实际项目中使用开源OLAP框架Mondrian及关系型数据库MySQL，尝试设计并实现了一套多维数据的分析及同步系统，以解决现有技术对于互联网上实时流动变化数据无法进行快速有效的多维度分析的问题。这里是对该方案的详细描述。阅读全文

posted @ 2012-10-14 22:29 大圆那些事阅读(8227) 评论(4) 推荐(4) 编辑

摘要：个人在做项目过程中，曾对MySQL系统配置参数进行过一些调整与优化工作，例如，链接超时断开、SQL超过缓冲区长度限制、调整内存表大小限制等，这里将逐一进行梳理总结，以便后续遇到类似问题能够快速解决。阅读全文

posted @ 2012-10-14 21:18 大圆那些事阅读(1334) 评论(0) 推荐(0) 编辑