2015年1月13日

【转】Zookeeper解析、安装、配置

摘要: Zookeeper全解析——Paxos作为灵魂http://www.douban.com/note/208430424/?qq-pf-to=pcqq.discussionZooKeeper-3.3.4集群安装配置http://blog.csdn.net/shirdrn/article/details... 阅读全文

posted @ 2015-01-13 13:55 南馨 阅读(108) 评论(0) 推荐(0) 编辑

2015年1月3日

【转】activemq的几种基本通信方式总结

摘要: 原文出处:http://shmilyaw-hotmail-com.iteye.com/blog/1897635简介 在前面一篇文章里讨论过几种应用系统集成的方式,发现实际上面向消息队列的集成方案算是一个总体比较合理的选择。这里,我们先针对具体的一个消息队列Activemq的基本通信方式进行探讨。a... 阅读全文

posted @ 2015-01-03 20:29 南馨 阅读(180) 评论(0) 推荐(0) 编辑

2014年12月26日

【转】Java小应用:Eclipse中建立自己的类库,给不同的工程使用

摘要: 原文出处:http://blog.csdn.net/leixingbang1989/article/details/30491789win7 进入服务 开始 运行 services.msc在多个工程当中,可能使用到相同的jar包,这时,如果我们建立一个自己的类库,该类库中存放着所有工程均需要的jar... 阅读全文

posted @ 2014-12-26 18:17 南馨 阅读(134) 评论(0) 推荐(0) 编辑

【原创】Java小应用:将以逗号隔开的字符串数组按照给定的长度换行

摘要: 程序源码:public String getSplitStr(int num) { StringBuffer buf = new StringBuffer(); int i=0; for (Object o : item) { i++; String temp=""; if(o==... 阅读全文

posted @ 2014-12-26 16:02 南馨 阅读(840) 评论(0) 推荐(0) 编辑

2014年12月24日

【原创】HBase 查询过程中关于scan.setFilter和scan.addColumn的使用

摘要: 在对HBase数据库的查询中,用到了SingleColumnValueFilter用于实现对于时间列中某一段时间记录的过滤,并且使用scan.addColumn获取结果中的某一列,具体使用如下:Scan scan = new Scan(); List filters = new ArrayList(... 阅读全文

posted @ 2014-12-24 16:30 南馨 阅读(2035) 评论(0) 推荐(0) 编辑

2014年12月8日

【转】华为Hbase二级索引(Secondary Index)细节分析

摘要: 华为在HBTC 2012上由其高级技术经理Anoop Sam John透露了其二级索引方案,这在业界引起极大的反响,甚至有人认为,如果华为早点公布这个方案,hbase的某些问题早就解决了。其核心思想是保证索引表和主表在同一个region server上。更新:目前该方案华为已经开源,详见:https... 阅读全文

posted @ 2014-12-08 10:27 南馨 阅读(375) 评论(0) 推荐(0) 编辑

2014年11月20日

【原创】快速编写和运行一个属于自己的MapReduce例子程序

摘要: 如何快速地编写和运行一个属于自己的MapReduce例子程序原文出处 :http://www.it165.net/pro/html/201403/11128.html首先有两个前提:1.有一个已经可以运行的hadoop集群(也可以是伪分布系统),上面的hdfs和mapreduce工作正常(这个真的是... 阅读全文

posted @ 2014-11-20 20:58 南馨 阅读(180) 评论(0) 推荐(0) 编辑

【原创】linux集群时间同步

摘要: 出处:http://blog.csdn.net/jiangheng0535/article/details/10287609说明:由于hadoop集群对时间要求很高,所以集群内主机要经常同步。本文档适合ubuntu、redhat系列。注:很多内容是在网上摘录,然后试验后总结,如有疑问可留言探讨。1.... 阅读全文

posted @ 2014-11-20 20:23 南馨 阅读(166) 评论(0) 推荐(0) 编辑

【原创】我需要运行几个ZooKeeper?

摘要: 由于Zookeeper采用了Paxos算法来进行选举,因此实际能够有效参与选举的节点数量是奇数。你运行一个zookeeper也是可以的,但是在生产环境中,你最好部署3,5,7个节点。部署的越多,可靠性就越高,当然最好是部署奇数个,偶数个不是不可以的,但是zookeeper集群是以宕机个数过半才会让... 阅读全文

posted @ 2014-11-20 20:15 南馨 阅读(318) 评论(0) 推荐(0) 编辑

【原创】一个Hadoop集群上搭建多个Hbase集群

摘要: 即不同的集群在hdfs上建立不同的根目录和Zooeekper的根目录。如图所示:原来的hbase-0.94.14版本中在hdfs上目录是hbase,zookeeper的根目录是zookeeper_data。hbase-0.96.8版本中在hdfs上目录是index,zookeeper的根目录是zoo... 阅读全文

posted @ 2014-11-20 19:55 南馨 阅读(520) 评论(0) 推荐(0) 编辑

导航