随笔分类 -  Storm

基于Redis、Storm的实时数据查询实践
摘要：基于Redis、Storm的实时数据查询实践 通过算法小组给出的聚合文件，我们需要实现一种业务场景，通过用户的消费地点的商户ID与posId，查询出他所在的商圈，并通过商圈地点查询出与该区域的做活动的商户，并与之进行消息匹配，推送相应活动信息到用户手机。 那么整个流程分为两步，第一步，将整个聚合文件 阅读全文
posted @ 2017-09-07 10:11 wjj1013 阅读(722) 评论(0) 推荐(0) 编辑
Storm入门之第一章
摘要：Storm入门之第一章 http://ifeve.com/getting-started-with-storm-1/ 原书下载地址 译者：吴京润 编辑：方腾飞 译者注：本文翻译自《Getting Started With Storm》，本书中所有Storm相关术语都用斜体英文表示。 这些术语的字面意 阅读全文
posted @ 2017-07-24 16:16 wjj1013 阅读(162) 评论(0) 推荐(0) 编辑
spark与storm的对比
摘要：spark与storm的对比 对比点 Storm Spark Streaming 实时计算模型 纯实时，来一条数据，处理一条数据 准实时，对一个时间段内的数据收集起来，作为一个RDD，再处理 实时计算延迟度 毫秒级 秒级 吞吐量 低 高 事务机制 支持完善 支持，但不够完善 健壮性 / 容错性 Zo 阅读全文
posted @ 2017-06-29 11:44 wjj1013 阅读(169) 评论(0) 推荐(0) 编辑
Storm：最火的流式处理框架
摘要：Storm：最火的流式处理框架 伴随着信息科技日新月异的发展，信息呈现出爆发式的膨胀，人们获取信息的途径也更加多样、更加便捷，同时对于信息的时效性要求也越来越高。举个搜索场景中的例子，当一个卖家发布了一条宝贝信息时，他希望的当然是这个宝贝马上就可以被卖家搜索出来、点击、购买啦，相反，如果这个宝贝要等 阅读全文
posted @ 2017-06-08 09:27 wjj1013 阅读(152) 评论(0) 推荐(0) 编辑
spark、storm与Hadoop
摘要：spark、storm与Hadoop 1. Storm是什么，怎么做，如何做的更好？Storm是一个开源的分布式实时计算系统，它可以简单、可靠地处理大量的数据流。Storm有很多应用场景，如实时分析、在线机器学习、持续计算、分布式RPC、ETL，等等。Storm支持水平扩展，具有高容错性，保证每个消 阅读全文
posted @ 2017-06-01 11:10 wjj1013 阅读(123) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示