随笔分类 -  storm

Storm Topology Parallelism
摘要：Understanding the Parallelism of a Storm Topology What makes a running topology: worker processes, executors and tasks 在一个Strom集群中，实际运行一个topology有三个主要 阅读全文
posted @ 2018-02-03 09:49 废物大师兄 阅读(641) 评论(0) 推荐(0)
Storm容错和高可用
摘要：Daemon Fault Tolerance Storm有一些不同的守护进程 Nimbus负责调度workers supervisors负责运行和杀死workers log views负责访问日志 UI负责显示集群的状态 What happens when a worker dies? 当一个wor 阅读全文
posted @ 2018-02-02 18:09 废物大师兄 阅读(2431) 评论(0) 推荐(2)
Storm保证消息处理
摘要：Guaranteeing Message Processing Storm保证每一个tuple被完全处理。Strom中一个核心的机制是它提供了一种跟踪tuple血统的能力，它使用了一种十分有效的方式跟踪topology中的tuple。 Storm中最基本的抽象是提供了至少一次（at-least-on 阅读全文
posted @ 2018-02-01 17:30 废物大师兄 阅读(875) 评论(1) 推荐(1)
Storm集群安装与部署
摘要：storm集群安装 阅读全文
posted @ 2018-02-01 12:16 废物大师兄 阅读(493) 评论(0) 推荐(0)
Storm WordCount
摘要：特别注意，在本地运行的时候应该去掉<scope>provided</scope>，否则会报java.lang.ClassNotFoundException: org.apache.storm.topology.IRichSpout 集群环境中运行的时候应该加上 在这个例子中，有一个spout，两个b 阅读全文
posted @ 2018-01-31 17:05 废物大师兄 阅读(359) 评论(0) 推荐(0)
Storm是什么
摘要：Why use Storm? Apache Storm是一个免费的开源的分布式实时计算系统。Storm使得可靠的实时处理无边界的数据量变得很容易，就如同Hadoop做批处理那样。Storm很简单，可以用任意的编程语言。 Storm有许多使用案例：实时分析、在线机器学习、持续的计算、分布式RPC、ET 阅读全文
posted @ 2018-01-30 16:51 废物大师兄 阅读(2857) 评论(0) 推荐(0)