2017年5月24日
Storm通信机制（了解）
摘要： Worker间的通信：经常需要通过网络跨节点进行，Storm使用ZeroMQ或Netty(0.9以后默认使用)作为进程间通信的消息框架。 Worker进程内部通信：不同worker的thread通信使用LMAX Disruptor来完成。 不同topologey之间的通信：Storm不负责，需要自己 阅读全文
posted @ 2017-05-24 23:19 ahu-lichang 阅读(1270) 评论(0) 推荐(0) 编辑
Storm程序的并发机制（重点掌握）
摘要： 概念 Workers (JVMs): 在一个物理节点上可以运行一个或多个独立的JVM 进程。一个Topology可以包含一个或多个worker(并行的跑在不同的物理机上), 所以worker process就是执行一个topology的子集, 并且worker只能对应于一个topology Exec 阅读全文
posted @ 2017-05-24 16:15 ahu-lichang 阅读(364) 评论(0) 推荐(0) 编辑
Storm目录树和任务提交过程
摘要： Storm组件本地目录树 Storm zookeeper目录树 Storm任务提交的过程 阅读全文
posted @ 2017-05-24 13:00 ahu-lichang 阅读(760) 评论(0) 推荐(0) 编辑