03 2016 档案
摘要:客户端提交Topology代码到Nimbus。Nimbus针对该Topology建立本地的目录,Nimbus中的调度器根据Topology的配置计算Task,并把Task分配到不同的Worker上,调度的结果写入Zookeeper中。Zookeeper上创建assignments节点,存储Task和
阅读全文
摘要:storm集群中的一台机器可能运行着一个或者多个worker进程,其从属于一个或者多个topology。一个worker进程运行着多个executor线程;每一个worker从属于一个topology;executor是单线程,每一个executor运行着相同组件(spout或者bolt)的1个或者
阅读全文
摘要:Storm 简介 Storm Topology的并发度 Storm - Guaranteeing message processing Storm - Transactional-topologies Twitter Storm – DRPC Storm 多语言支持 Storm starter
阅读全文
摘要:搭建一个Storm集群需要依次完成的安装步骤: 搭建Zookeeper集群; 安装Storm依赖库 (Java 1.7x版本、Python 2.6.x版本); 下载并解压Storm发布版本 (0.10.0版本); 修改storm.yaml配置文件; 启动Storm各个后台进程。 storm.yaml
阅读全文
摘要:消息的可靠性保障 Storm 能够保证每一个由 Spout 发送的消息都能够得到完整地处理。本文详细解释了 Storm 如何实现这种保障机制,以及作为用户如何使用好 Storm 的可靠性机制。 消息的“完整性处理”是什么意思 一个从 spout 中发送出的 tuple 会产生上千个基于它创建的 tu
阅读全文

浙公网安备 33010602011771号