07 2015 档案

一种基于Storm的可扩展即时数据处理架构思考
摘要：使用storm可以方便的构建一种集群式的数据框架，并通过定义topo来实现业务逻辑。 但使用topo存在一个缺点， topo的处理能力来自于其启动时设置的worker数目，在很多情况下，我们需要能够根据业务压力来调整集群的处理能力，这时候单一的topo就无法解决这个问题了。 为了能够更加灵活的定义处理能力，可以考虑将原有的topo根据业务域进行拆分，做到互不干扰，灵活控制，而且为了能够更加经济的利用处理资源，可以考虑引入worker资源池的概念，达到对资源的充分利用。 阅读全文
posted @ 2015-07-24 11:27 纪玉奇 阅读(1691) 评论(4) 推荐(1) 编辑
storm - 使用过程中的一点思考
摘要：引子这几天为了优化原有的数据处理框架，比较系统的学习了storm的一些内容，整理一下心得1. storm提供的是一种数据处理思想，它不提供具体的解决方案 storm的核心是topo的定义，而topo承载着所有的业务逻辑，我们基于storm的topo的组织方案，来编排私有的业务实现逻辑。 stor... 阅读全文
posted @ 2015-07-21 20:52 纪玉奇 阅读(308) 评论(0) 推荐(0) 编辑
storm - 基础概念整理
摘要：主要内容翻译自storm官方网站 阅读全文
posted @ 2015-07-21 20:21 纪玉奇 阅读(1912) 评论(1) 推荐(1) 编辑
精华文章
摘要：Java RMI 服务器框架 ：http://www.ibm.com/developerworks/cn/java/j-rmiframe/使用RMI+Zookeepr实现远程调用框架http://www.open-open.com/lib/view/open1416097626352.html 阅读全文
posted @ 2015-07-01 15:17 纪玉奇 阅读(162) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示