2019年6月14日

Storm入门(1)--概念及部署

摘要: 前面介绍了流计算,在流计算领域,一个热门的计算框架就是-Storm。还是先介绍概念。。。 一、Storm是什么 在流处理过程中,我们除了考虑最重要的数据处理的逻辑,还需要维护消息队列和消费者,考虑消息怎么流、怎么序列化等。而Storm就是这样一个流式计算框架,它为你完成了消息传递等这些通用模块,让你 阅读全文

posted @ 2019-06-14 22:58 at_today 阅读(420) 评论(0) 推荐(0) 编辑

Storm入门(0)--流计算

摘要: 一、静态数据、流数据 以及 批量计算、实时计算 大数据分类两类:静态数据和动态数据(流数据)。针对这两类数据的计算模式分别是批量计算和实时计算。 静态数据:历史数据持久化存储在系统里,这类数据的特点是数据量大、数量有限(数据的时间区间是确定的)。例如企业为了支持决策分析而构建的数据仓库系统。 对这类 阅读全文

posted @ 2019-06-14 22:57 at_today 阅读(414) 评论(0) 推荐(0) 编辑

导航