Hive on ES
摘要:ES对于类似数据库的SQL查询很无力,可以使用Hive on ES来实现SQL的查询。2个百万级的索引做关联时,需要大概1分多钟,基于es2.1版本。 1.将elasticsearch-hadoop-2.1.1.jar拷贝到hive/lib目录下。 2.创建hive表 create external
阅读全文
posted @
2017-06-25 18:32
lnlvinso
阅读(2358)
推荐(0) 编辑
灰度发布
摘要:灰度发布是指在黑与白之间,能够平滑过渡的一种发布方式。AB test就是一种灰度发布方式,让一部用户继续用A,一部分用户开始用B,如果用户对B没有什么反对意见,那么逐步扩大范围,把所有用户都迁移到B上面 来。灰度发布可以保证整体系统的稳定,在初始灰度的时候就可以发现、调整问题,以保证其影响度。 Gm
阅读全文
posted @
2017-06-25 17:33
lnlvinso
阅读(176)
推荐(0) 编辑
LSM树由来、设计思想以及应用到HBase的索引
摘要:原文链接:http://www.cnblogs.com/yanghuahui/p/3483754.html 讲LSM树之前,需要提下三种基本的存储引擎,这样才能清楚LSM树的由来: 哈希存储引擎 是哈希表的持久化实现,支持增、删、改以及随机读取操作,但不支持顺序扫描,对应的存储系统为key-valu
阅读全文
posted @
2017-06-14 22:15
lnlvinso
阅读(178)
推荐(0) 编辑
JBOD
摘要:JBOD(Just a Bunch Of Disks)不是RAID,它是可以把不同容量的硬盘串连成一个大的逻辑盘,与RAID0不同的是在写入数据时是向一个硬盘写入,写满后再向下一个硬盘写。 尽管建议采用RAID(Redundant Array of Independent Disk,即磁盘阵列)作为
阅读全文
posted @
2017-06-04 22:41
lnlvinso
阅读(3811)
推荐(0) 编辑