随笔分类 -  HBase

NoSQL数据库HBase相关技术和应用
HBase在数据统计应用中的使用心得
摘要:由于项目开发的需要,使用HBase作为数据统计应用的存储系统,这里是一些经验总结以及对于使用过程中存在问题的解决思路。 阅读全文

posted @ 2011-11-19 23:56 大圆那些事 阅读(26431) 评论(8) 推荐(0) 编辑

分布式文件系统KFS源码阅读与分析(三):RPC实现机制(MetaServer端)
摘要:分布式文件系统KFS的MetaServer和Client采用服务器/客户端模型,MetaServer和Client之间的通讯是通过RPC机制来实现的。这里介绍下KFS中MetaServer端的RPC实现机制。 阅读全文

posted @ 2011-11-07 01:03 大圆那些事 阅读(4620) 评论(0) 推荐(0) 编辑

对互联网海量数据实时计算的理解
摘要:本文依次介绍了互联网领域海量数据实时计算的基本概念、相关技术和产品以及一个简单的应用实例。 阅读全文

posted @ 2011-10-28 01:06 大圆那些事 阅读(18888) 评论(9) 推荐(11) 编辑

分布式文件系统KFS源码阅读与分析(二):MetaServer元数据持久化
摘要:KFS文件系统的MetaServer元数据的持久化采用的是checkpoint + log方式,下面将结合其源码,对KFS MetaServer中元数据的持久化机制及其实现细节进行分析。 阅读全文

posted @ 2011-08-28 16:56 大圆那些事 阅读(3110) 评论(8) 推荐(0) 编辑

分布式文件系统KFS源码阅读与分析(一):MetaServer元数据组织结构
摘要:KFS文件系统的MetaServer元数据管理采用的是B+树方式,下面将结合其源码,对KFS MetaServer中元数据的组织形式及有关实现细节进行分析。 阅读全文

posted @ 2011-08-25 01:59 大圆那些事 阅读(4704) 评论(8) 推荐(2) 编辑

分布式文件系统KFS源码编译与安装过程
摘要:Kosmos distributed file system (KFS)是一个专门为数据密集型应用(搜索引擎,数据挖掘等)而设计的存储系统,类似于Google的GFS和Hadoop的HDFS分布式文件系统。KFS的实现是C++,支持的客户端包括C++,Java和Python。 以前曾在KFS的基础上做过开发,这里介绍一下如何进行KFS的源码编译与安装过程(以kfs-0.5为例)。 阅读全文

posted @ 2011-08-22 23:52 大圆那些事 阅读(5836) 评论(6) 推荐(0) 编辑

分布式文件系统KFS基础知识介绍
摘要:Kosmos distributed file system,简称KFS,是一个类GFS的分布式文件系统,被设计用于分布式的结构化存储。下面将对KFS的体系结构进行简单介绍,最后给出一个使用KFS C++ API的示例。 阅读全文

posted @ 2011-08-21 11:34 大圆那些事 阅读(5800) 评论(0) 推荐(1) 编辑

HBase Java客户端编程
摘要:本文以HBase 0.90.2为例,介绍如何在Windows系统,Eclipse IDE集成环境下,使用Java语言,进行HBase客户端编程,包含建立表、删除表、插入记录、删除记录、各种方式下的查询操作等。 阅读全文

posted @ 2011-08-14 15:40 大圆那些事 阅读(23919) 评论(7) 推荐(4) 编辑

导航