2015年12月9日
flume 容错和负载均衡3
摘要： 集群采用3台机器：host1 load-balance设置 host2 机器1 host3 机器2其中，host1 机器配置：#Define a memory channel called c1 on a1 a1.channels = c1 a1.sources = r1 a1.sinks... 阅读全文
posted @ 2015-12-09 14:42 王金松 阅读(341) 评论(0) 推荐(0) 编辑
flume 容错和负载均衡2
只有注册用户登录后才能阅读该文。 阅读全文
posted @ 2015-12-09 14:11 王金松 阅读(4) 评论(0) 推荐(0) 编辑
flume 容错和负载均衡
摘要： 【Apache Flume系列】Flume-ng failover 以及Load balance测试及注意事项252637867 1730 2014-08-14 15:44 flume 负载均衡 容错 failover load balance 好久没写博客了。最近在研究storm、flume和ka... 阅读全文
posted @ 2015-12-09 13:57 王金松 阅读(1623) 评论(0) 推荐(0) 编辑
trident 序列号问题
摘要： 在使用Storm的trident做流计算开发时，遇到一个诡异的问题：我继承IPartitionedTridentSpout或者IOpaquePartitionedTridentSpout接口做事务型实时计算的开发，类型T通常是用来每个批次序列化到ZK中的偏移量。我遇到的问题是：只要实时应用启动后不终... 阅读全文
posted @ 2015-12-09 13:53 王金松 阅读(190) 评论(0) 推荐(0) 编辑
storm 入门
摘要： Storm的典型用例有哪些呢？流处理：正如前面的例子中所展示的，和其他流处理系统不同的是，使用Storm不需要中间队列。连续计算：向客户端持续发送数据，以便它们能实时更新、显示结果，例如网站统计。分布式远程过程调用：可简单地并行运行CPU密集型操作。在Storm集群中有两种节点：主节点(master... 阅读全文
posted @ 2015-12-09 11:02 王金松 阅读(133) 评论(0) 推荐(0) 编辑