博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理
上一页 1 2 3 4 5 6 7 8 9 10 ··· 18 下一页

2015年4月3日

摘要: 本文导读:1、What——JStorm是什么? 1.1 概述 1.2优点 1.3应用场景 1.4JStorm架构2、Why——为什么启动JStorm项目?(与storm的区别) 2.1storm的现状、缺陷 2.2JStorm比Storm更稳定,功能更强大,更快!... 阅读全文

posted @ 2015-04-03 11:35 xymaqingxiang 阅读(13566) 评论(0) 推荐(1) 编辑

摘要: 关于Storm的高可用,有以下几个方面: (1)数据利用阶段可以通过ACK机制保证数据被处理; (2)在进程级别,worker失效,supervisor会自动重启worker线程; (3)在组件级别,supervisor节点失效,会在其他节点重启该supervisor任务; 但是一个很大... 阅读全文

posted @ 2015-04-03 11:10 xymaqingxiang 阅读(2246) 评论(0) 推荐(0) 编辑

2015年4月2日

摘要: 技术站点Hacker News:非常棒的针对编程的链接聚合网站Programming reddit:同上MSDN:微软相关的官方技术集中地,主要是文档类infoq:企业级应用,关注软件开发领域OSChina:开源技术社区,开源方面做的不错哦cnblogs,51cto,csdn:常见的技术社区,各有专... 阅读全文

posted @ 2015-04-02 21:07 xymaqingxiang 阅读(281) 评论(0) 推荐(0) 编辑

摘要: 大数据我们都知道hadoop,可是还会各种各样的技术进入我们的视野:Spark,Storm,impala,让我们都反映不过来。为了能够更好 的架构大数据项目,这里整理一下,供技术人员,项目经理,架构师选择合适的技术,了解大数据各种技术之间的关系,选择合适的语言。我们可以带着下面问题来阅读本文章:... 阅读全文

posted @ 2015-04-02 21:06 xymaqingxiang 阅读(527) 评论(0) 推荐(0) 编辑

摘要: 徐明明博客:Twitter Storm源代码分析之ZooKeeper中的目录结构 我们知道Twitter Storm的所有的状态信息都是保存在Zookeeper里面,nimbus通过在zookeeper上面写状态信息来分配任务,supervisor,task通过从zookeeper中读状态来领取任... 阅读全文

posted @ 2015-04-02 16:12 xymaqingxiang 阅读(350) 评论(0) 推荐(0) 编辑

摘要: Storm分布式实时流计算框架相关技术总结 Storm作为一个开源的分布式实时流计算框架,其内部实现使用了一些常用的技术,这里是对这些技术及其在Storm中作用的概括介绍。以此为基础,后续再深入了解Storm的内部实现细节。1. Zookeeper集群 Zookeeper是一个针对大型分布式系统... 阅读全文

posted @ 2015-04-02 16:03 xymaqingxiang 阅读(360) 评论(0) 推荐(0) 编辑

摘要: 你有个任务,需要用到某个开源项目;或者老大交代你一个事情,让你去了解某个东西。怎么下手呢?如何开始呢?我的习惯是这样:1.首先,查找和阅读该项目的博客和资料,通过google你能找到某个项目大体介绍的博客,快速阅读一下就能对项目的目的、功能、基本使用有个大概的了解。2.阅读项目的文档,重点关注类似G... 阅读全文

posted @ 2015-04-02 11:35 xymaqingxiang 阅读(297) 评论(0) 推荐(0) 编辑

2015年3月31日

摘要: 积累:最值得阅读学习的 10 个 C 语言开源项目代码改变计算技术的 9 个伟大算法程序员选修课丨追妹子的各种算法追MM 和设计模式:趣解 23 种设计模式设计高可用性、容错和数据隔离的Hadoop集群题库:程序员面试:电话面试问答Top 50程序员面试笔试宝典学习记录(一)百度2015校园招聘面试... 阅读全文

posted @ 2015-03-31 21:28 xymaqingxiang 阅读(218) 评论(0) 推荐(0) 编辑

摘要: Storm配置项详解 ——阿里数据平台技术博客:storm配置项详解什么是Storm?Storm是twitter开源的一套实时数据处理框架,基于该框架你可以通过简单的编程来实现对数据流的实时处理变换。Storm的配置文件一般存放在$STORM_HOME/conf下,通常名为storm.yaml,它... 阅读全文

posted @ 2015-03-31 21:12 xymaqingxiang 阅读(1129) 评论(0) 推荐(0) 编辑

摘要: Storm UI ——本文主要解释下storm ui上各项属性的含义。通过http://UI_Server:8080可以打开Storm Web UI看看Storm集群的状态。1. mainpage 首页主要分为3块: a. Cluster Summary version:stor... 阅读全文

posted @ 2015-03-31 20:59 xymaqingxiang 阅读(1830) 评论(0) 推荐(0) 编辑

上一页 1 2 3 4 5 6 7 8 9 10 ··· 18 下一页