摘要: Nimbus 资源调度任务分配 接收jar包Supervisor接收nimbus分配的任务 启动、停止自己管理的worker进程Worker 运行具体处理运算组件的进程HadoopStorm主节点ResourceManagerNimbus从节点NodeManagerSupervisor应用程序Job 阅读全文
posted @ 2019-06-24 16:53 北漂屌丝 阅读(142) 评论(0) 推荐(0) 编辑
摘要: 对比点Spark StreamingStorm 实时计算模型 准实时,对一个时间段内的数据收集起来,作为一个RDD,再处理 纯实时,来一条数据处理一条数据 实时计算延迟度 秒级 毫秒级 吞吐量 高 低 事务机制 支持,但不够完善 支持完善 健壮性 / 容错性 Checkpoint,WAL,一般 ZooKeeper,Acker,非常强 动态调整并行度 不支持 支持 ... 阅读全文
posted @ 2019-06-24 15:27 北漂屌丝 阅读(355) 评论(0) 推荐(0) 编辑