上一页 1 ··· 9 10 11 12 13 14 15 16 17 ··· 31 下一页
摘要: 转自:http://blog.csdn.net/colorant/article/details/12081909==是什么==简单的说,Kafka是由Linkedin开发的一个分布式的消息队列系统(Message Queue)目标Scope(解决什么问题)kafka开发的主要初衷目标是构建一个用来... 阅读全文
posted @ 2016-01-12 15:47 五三中 阅读(2093) 评论(0) 推荐(0) 编辑
摘要: 转自:http://my.oschina.net/frankwu/blog/303745Kafka 之 中级:http://my.oschina.net/frankwu/blog/305010摘要最近研究采集层,对Kafka做了一个研究。分为入门,中级,高级步步进阶。本篇主要介绍基本概念,适用场景。... 阅读全文
posted @ 2016-01-12 15:41 五三中 阅读(453) 评论(0) 推荐(0) 编辑
摘要: 转自:http://blog.csdn.net/qqqq724/article/details/43228863背景介绍Kafka简介 Kafka是一种分布式的,基于发布/订阅的消息系统。主要设计目标如下:以时间复杂度为O(1)的方式提供消息持久化能力,即使对TB级以上数据也能保证常数时间的访问性... 阅读全文
posted @ 2016-01-12 15:31 五三中 阅读(4440) 评论(0) 推荐(0) 编辑
摘要: 转自:http://blog.csdn.net/chen_jp/article/details/7983076Hadoop集群中有三种作业调度算法,分别为FIFO,公平调度算法和计算能力调度算法先来先服务(FIFO)FIFO比较简单,hadoop中只有一个作业队列,被提交的作业按照先后顺序在作业队列... 阅读全文
posted @ 2016-01-12 15:16 五三中 阅读(935) 评论(0) 推荐(0) 编辑
摘要: 转自:http://blog.csdn.net/yangbutao/article/details/8394149了解了布隆过滤器作用于HFile之上以及对HFile有了更深层次了解。另有:http://my.oschina.net/zhengyang841117/blog/188723一、HFil... 阅读全文
posted @ 2016-01-11 23:38 五三中 阅读(2096) 评论(0) 推荐(0) 编辑
摘要: 转自:http://www.cnblogs.com/shitouer/archive/2013/02/20/hbase-hfile-bulk-load.html一、这种方式有很多的优点:1. 如果我们一次性入库hbase巨量数据,处理速度慢不说,还特别占用Region资源, 一个比较高效便捷的方法就... 阅读全文
posted @ 2016-01-11 15:21 五三中 阅读(1012) 评论(0) 推荐(0) 编辑
摘要: 转自:http://www.cnblogs.com/shitouer/archive/2013/02/05/configuring-hbase-memstore-what-you-should-know.htmlMemStore是HBase非常重要的组成部分,深入理解MemStore的运行机制、工作... 阅读全文
posted @ 2016-01-11 15:19 五三中 阅读(4595) 评论(0) 推荐(0) 编辑
摘要: 转自:http://blog.csdn.net/saint1126/article/details/8257941base过滤器的比较操作符:LESS GREATER_OR_EQUAL >=GREATER >NO_OPno operation比较器:BinaryComparator 按字节索引顺序比... 阅读全文
posted @ 2016-01-11 13:43 五三中 阅读(354) 评论(0) 推荐(0) 编辑
摘要: 转自 :http://blog.itpub.net/28912557/viewspace-1127423/Map-Reduce处理过程(分析气象数据的map-reduce过程)1,调用标准的input类(默认TextInputFormat),将输入数据转化成标准的样式,成为map的输入。2,map过... 阅读全文
posted @ 2016-01-11 02:26 五三中 阅读(278) 评论(0) 推荐(0) 编辑
摘要: 转自:http://blog.csdn.net/lucky_greenegg/article/details/47070565由于项目需要,将原来的系统升级需要用到Hbase技术,使用了之后发现,确实很不错。那么问题来了,为什么在这里要用Hbase,而不是以前的关系型数据库Oracle,他们各自有什... 阅读全文
posted @ 2016-01-11 02:21 五三中 阅读(5221) 评论(0) 推荐(0) 编辑
上一页 1 ··· 9 10 11 12 13 14 15 16 17 ··· 31 下一页