随笔分类 -  Storm

摘要:转自:http://www.cnblogs.com/panfeng412/archive/2012/06/04/storm-common-patterns-of-stream-join.html 流聚合(stream join)是指将具有共同元组(tuple)字段的数据流(两个或者多个)聚合形成一个 阅读全文
posted @ 2016-06-17 10:37 五三中 阅读(344) 评论(0) 推荐(0) 编辑
摘要:转自:http://www.cnblogs.com/foreach-break/p/what-is-real-time-computing-and-how.html?utm_source=tuicool&utm_medium=referral 本文目录 [-点此收起] 实时计算是什么? 最热的微博话 阅读全文
posted @ 2016-05-25 00:31 五三中 阅读(1824) 评论(0) 推荐(0) 编辑
摘要:转自:http://shiyanjun.cn/archives/1472.html 本文算是个人对Storm应用和学习的一个总结,由于不太懂Clojure语言,所以无法更多地从源码分析,但是参考了官网、好多朋友的文章,以及《Storm Applied: Strategies for real-tim 阅读全文
posted @ 2016-05-20 20:09 五三中 阅读(2089) 评论(0) 推荐(0) 编辑
摘要:转自:http://blog.csdn.net/hguisu/article/details/8454368 简单和明了,Storm让大数据分析变得轻松加愉快。 当今世界,公司的日常运营经常会生成TB级别的数据。数据来源囊括了互联网装置可以捕获的任何类型数据,网站、社交媒体、交易型商业数据以及其它商 阅读全文
posted @ 2016-03-09 20:00 五三中 阅读(1502) 评论(0) 推荐(0) 编辑
摘要:转自:http://www.dataguru.cn/thread-341168-1-1.html 流式实时分布式计算系统在互联网公司占有举足轻重的地位,尤其在在线和近线的海量数据处理上。而处理这些海量数据的,就是实时流式计算系统。Spark是实时计算的系统,支持流式计算,批处理和实时查询。除了... 阅读全文
posted @ 2016-01-16 22:53 五三中 阅读(3541) 评论(0) 推荐(0) 编辑
摘要:转自:http://xumingming.sinaapp.com/127/twitter-storm如何保证消息不丢失/   storm保证从spout发出的每个tuple都会被完全处理。这篇文章介绍storm是怎么做到这个保证的,以及我们使用者怎么做才能充分利用storm的可靠性特点。 就如同蝴蝶 阅读全文
posted @ 2016-01-16 19:58 五三中 阅读(764) 评论(0) 推荐(0) 编辑
摘要:转自:http://www.cnblogs.com/fxjwind/p/3806404.html之前对这个的理解有些问题,今天用到有仔细梳理了一遍,记录一下首先开启storm tracker机制的前提是,1. 在spout emit tuple的时候,要加上第3个参数messageid2. 在配置中... 阅读全文
posted @ 2016-01-12 16:20 五三中 阅读(1166) 评论(0) 推荐(0) 编辑
摘要:转自:http://www.cnblogs.com/fxjwind/p/4689607.html背景相对于传统的Hadoop这样的batch分析平台,流式分析的优点就是实时性, 即可以在秒级别延迟上得到分析结果 。当然缺点是, 很难保证强一致性,即Exactly-Once语义 (在海量数据的前提下,... 阅读全文
posted @ 2016-01-12 16:07 五三中 阅读(1278) 评论(0) 推荐(0) 编辑
摘要:转自:http://blog.csdn.net/colorant/article/details/8256039更多云计算相关项目快速理解文档http://blog.csdn.net/colorant/article/details/8255910==是什么==目标Scope(解决什么问题)分布式实... 阅读全文
posted @ 2016-01-12 15:51 五三中 阅读(736) 评论(0) 推荐(0) 编辑
摘要:转自:http://www.aboutyun.com/thread-9216-1-1.html使用Storm处理事务型实时计算需求时的几处难点:http://blog.sina.com.cn/s/blog_6ff05a2c0101ficp.html最近搞日志处理,注意是日志处理,如果用流计算处理一些... 阅读全文
posted @ 2016-01-10 21:25 五三中 阅读(2117) 评论(0) 推荐(0) 编辑
摘要:转自:http://qq85609655.iteye.com/blog/2035717摘要:随着数据体积的越来越大,实时处理成为了许多机构需要面对的首要挑战。Shruthi Kumar和Siddharth Patankar在Dr.Dobb’s上结合了汽车超速监视,为我们演示了使用Storm进行实时大... 阅读全文
posted @ 2016-01-01 23:25 五三中 阅读(289) 评论(0) 推荐(0) 编辑
摘要:转自:http://www.aboutyun.com/thread-7394-1-1.html了解Storm:http://www.aboutyun.com/thread-9547-1-2.html问题导读:1.hadoop有master与slave,Storm与之对应的节点是什么?2.Storm控... 阅读全文
posted @ 2015-12-15 23:51 五三中 阅读(1203) 评论(0) 推荐(0) 编辑
摘要:转自:http://blog.linezing.com/?p=1847storm:http://www.cnblogs.com/panfeng412/tag/Storm/http://blog.linezing.com/?cat=921.1 实时流计算互联网从诞生的第一时间起,对世界的最大的改变就是... 阅读全文
posted @ 2015-12-15 23:26 五三中 阅读(270) 评论(0) 推荐(0) 编辑
摘要:转自:http://blog.csdn.net/androidlushangderen/article/details/45955833storm学习系列:http://blog.csdn.net/Androidlushangderen/article/category/2647213前言什么是st... 阅读全文
posted @ 2015-12-14 01:36 五三中 阅读(1300) 评论(0) 推荐(0) 编辑
摘要:转自:http://blog.jobbole.com/48595/诞 生在2011年Storm开源之前,由于Hadoop的火红,整个业界都在喋喋不休地谈论大数据。Hadoop的高吞吐,海量数据处理的能力使得人们可以方便地处理海量数据。但是,Hadoop的缺点也和它的优点同样鲜明——延迟大,响应缓慢,... 阅读全文
posted @ 2015-11-29 01:27 五三中 阅读(428) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示