摘要：
前提条件：安装JDK1.7+get https://download.elasticsearch.org/elasticsearch/elasticsearch/elasticsearch-1.4.1.tar.gztar zxvf elasticsearch-1.4.1.tar.gz -C /usr... 阅读全文
摘要：
网络性能指标及测试方法1、网络可用性。网络可用性是指网络是否能正常通信，路径是否可达，可以在终端电脑上用“ping”命令来测试网络的连通性。例如：ping 10.48.128.1，这条命令测试的是从该终端电脑向目的10.48.128.1发送icmp echorequest，并等待接收icmp ech... 阅读全文
摘要：
hiveserver 后台启动nohup "${HIVE_HOME}"/bin/hive --service hiveserver2 &1. 使用&符号在后台执行命令你可以在Linux命令或者脚本后面增加&符号，从而使命令或脚本在后台执行，例如：.$ ./my-shell-script.sh2. 使... 阅读全文
摘要：
HiveServer2的配置和使用hive-site.xml配置hiveserver2的配置 hive.support.concurrency Enable Hive's TableLock Manager Service true hive.zookeeper.quorum Zookeeper ... 阅读全文
摘要：
参考官网：http://wiki.apache.org/hadoop/Hbase/ThriftApi环境：hbase-0.98.1-cdh5.1.0，hadoop-2.3.0-cdh5.1.0，centos6.5 x64，thrift21.引入maven依赖hbase已整合了thrift，如果是ja... 阅读全文
摘要：
Building Apache Thrift on CentOS 6.5Starting with a minimal installation, the following steps are required to build Apache Thrift on Centos 6.5. This ... 阅读全文
摘要：
安装配置ThriftThrift的编译器使用C++编写的，在安装编译器之前，首先应该保证操作系统基本环境支持C++的编译，安装相关依赖的软件包，如下所示sudo yum install automake libtool flex bison pkgconfig gcc-c++ boost-devel... 阅读全文
摘要：
thrift是一个软件框架，用来进行可扩展且跨语言的服务的开发。它结合了功能强大的软件堆栈和代码生成引擎，以构建在 C++, Java, Python, PHP, Ruby, Erlang, Perl, Haskell, C#, Cocoa, JavaScript, Node... 阅读全文
摘要：
limits.conf的格式如下：username|@groupname type resource limitusername|@groupname：设置需要被限制的用户名，组名前面加@和用户名区别。也可以用通配符*来做所有用户的限制。type：有 soft，hard 和 -，soft 指的是当前... 阅读全文
摘要：
问题导读：1.hadoop有master与slave，Storm与之对应的节点是什么？2.Storm控制节点上面运行一个后台程序被称之为什么？3.Supervisor的作用是什么？4.Topology与Worker之间的关系是什么？5.Nimbus和Supervisor之间的所有协调工作有maste... 阅读全文
摘要：
出处：http://www.aboutyun.com/thread-7464-1-1.htmlStorm的wordCounter计数器详解，这篇文章主要是介绍原理和实现 Demo拓扑package cn.jd.storm;import backtype.storm.Config;import bac... 阅读全文
摘要：
前言： CENTOS 6.X 系列默认安装的 Python 2.6 ，目前开发中主要是使用 Python 2.7 ，这两个版本之间还是有不少差异的，程序在 Python 2.6 下经常会出问题。比如： re.sub 函数 ，2.7 支持 flags 参数，而 2.6 却不支持。所以，打算安装 P... 阅读全文
摘要：
环境：cdh5.1.0启用协处理器方法1.启用协处理器 Aggregation(Enable Coprocessor Aggregation)我们有两个方法：1.启动全局aggregation，能过操纵所有的表上的数据。通过修改hbase-site.xml这个文件来实现，只需要添加如下代码： h... 阅读全文
摘要：
三个类：ServiceAProviderServiceBProviderServiceConsumer其中ServiceAProvider提供的服务名service-A，指向IP为192.168.58.130ServiceBProvider提供的服务名service-A，指向IP为192.168.5... 阅读全文
摘要：
源码地址https://github.com/Bellonor/myhadoop2.x/tree/master/myhadoop2.x/src/main/java/com/jamesfen/zookeeper各个jar包依赖见maven 的pom文件https://github.com/Bellon... 阅读全文
摘要：
protocol buffers的使用示例如果不了解protocol buffers，可以先参看：http://blog.csdn.net/zhu_xun/article/details/19343079本例的protobuf的版本为2.5.0，运行环境为windows平台（当然，在Linux下使用... 阅读全文
摘要：
前言：protobuf确实比JSON快很多倍，看下面的图就知道了。环境：win7 x64eclipse 4.3protoc-2.5.0安装包下载：https://code.google.com/p/protobuf/downloads/list2.6+的版本已转到GitHub上，下载地址是：http... 阅读全文
摘要：
版本：redis-2.8.19.tar.gz检查下面依赖是否安装，如果没有要先安装，不然会有异常。yum install gcc-c++yum install -y tcl。1、获取安装文件redis-2.8.19.tar.gzhttp://redis.io/download2、解压文件tar -x... 阅读全文
摘要：
此篇文章基于hive官方英文文档翻译，有些不好理解的地方加入了我个人的理解，官方的英文地址为：1.https://cwiki.apache.org/confluence/display/Hive/StorageHandlers2.https://cwiki.apache.org/confluence... 阅读全文
摘要：
hive与hbase数据类型对应关系当hbase中double，int 类型以byte方式存储时，用字符串取出来必然是乱码。在hivd与hbase整合时也遇到这个问题：做法是：#b1.加#bCREATE EXTERNAL TABLE hivebig (key string,CUST_NAME str... 阅读全文