摘要: 1、下载地址:https://www.elastic.co/downloads/elasticsearch2、解压unzip elasticsearch-1.7.0.zip3、启动 mv elasticsearch-1.7.0 elasticsearchcd elasticsearchbin/ela... 阅读全文
posted @ 2015-07-19 22:22 为了生活,加油 阅读(279) 评论(0) 推荐(0) 编辑
摘要: 一、生成密钥库和证书1、生成服务器证书库keytool -validity 365 -genkey -v -alias uyun -keyalg RSA -keystore /opt/UEM/keyStore/uyun.keystore -dname "CN=192.168.16.163,OU=br... 阅读全文
posted @ 2015-07-15 13:08 为了生活,加油 阅读(1970) 评论(0) 推荐(0) 编辑
摘要: Scheduler是storm的调度器,负责为topology分配当前集群中可用的资源。Storm分别提供了3中调度器:EvenScheduler:会将系统中的可用资源均匀地分配给当前需要任务分配的多个topology。DefaultScheduler:跟EvenScheduler基本上一样,唯一区... 阅读全文
posted @ 2015-07-11 10:34 为了生活,加油 阅读(477) 评论(0) 推荐(0) 编辑
摘要: 各种组件,比如tomcat、storm、flume,我们都可以通过JMX方式开启远程调试,主要可以用来跟踪源码,了解程序内部的运行机制,其次,也有利于你修改源码。首先,本质上是要修改flume本身启动的配置文件的jvm配置部分。找到flume目录下的bin文件夹,下面会有个flume-ng文件,这便... 阅读全文
posted @ 2015-07-10 23:41 为了生活,加油 阅读(2978) 评论(0) 推荐(0) 编辑
摘要: 目前有一个需求,就是Flume可以作为一个类似于tomcat的服务器,可以通过post请求进行访问,并且路径需要:ip:port/contextPath格式。经过一些资料获悉,httpSource只是httpSource的一个玩具工具,可以说毛坯版,目前仅仅支持的是按照ip:port访问,并不具备s... 阅读全文
posted @ 2015-07-09 22:51 为了生活,加油 阅读(2070) 评论(1) 推荐(1) 编辑
摘要: 1、源码下载:我用的是1.6版,因为加了kafka-sink,下载地址http://www.apache.org/dyn/closer.cgi/flume/1.6.0/apache-flume-1.6.0-src.tar.gz2、解压缩至C盘根目录下建议放到这个目录下,其他目录并不能保证通过。3、运... 阅读全文
posted @ 2015-07-08 23:18 为了生活,加油 阅读(600) 评论(0) 推荐(0) 编辑
摘要: 1、启动Nimbusbin/storm nimbus &2、启动Supervisorbin/storm supervisor &3、启动UIbin/storm ui &通过http://主机:8080去访问:4、列出拓扑bin/storm listTopology_name Statu... 阅读全文
posted @ 2015-06-11 10:07 为了生活,加油 阅读(1123) 评论(0) 推荐(0) 编辑
摘要: 场景:采集日志数据,日志数据有多个字段组成,需求是根据日志数据中的N个字段(维度),去统计指标数据(个数、平均值)等。 阅读全文
posted @ 2015-06-05 18:03 为了生活,加油 阅读(186) 评论(0) 推荐(0) 编辑
摘要: 1、拓扑(Topology):builder.setBolt(TRANSFORM_BOLT, new TransformationBolt(), 1).shuffleGrouping(MY_SPOUT);builder.setBolt(PROCESS1_BOLT, new FirstProcessB... 阅读全文
posted @ 2015-06-05 15:14 为了生活,加油 阅读(305) 评论(0) 推荐(0) 编辑
摘要: 1、搜索安装的jdk: rpm -qa|grep jdk结果如下:java-1.7.0-openjdk-1.7.0.45-2.4.3.3.el6.x86_64java-1.6.0-openjdk-1.6.0.0-1.66.1.13.0.el6.x86_642、删除: rpm -e --nodeps ... 阅读全文
posted @ 2015-05-19 09:49 为了生活,加油 阅读(277) 评论(0) 推荐(0) 编辑