04 2016 档案

Storm构建分布式实时处理应用初探
摘要：最近利用闲暇时间，又重新研读了一下Storm。认真对比了一下Hadoop，前者更擅长的是，实时流式数据处理，后者更擅长的是基于HDFS，通过MapReduce方式的离线数据分析计算。对于Hadoop，本身不擅长实时的数据分析处理。两者的共同点都是分布式的架构，而且，都类似有主/从关系的概念。本文中我 阅读全文
posted @ 2016-04-23 00:58 Newland 阅读(9209) 评论(5) 推荐(12) 编辑
异步并行批处理框架设计的一些思考
摘要：随着互联网信息技术日新月异的发展，一个海量数据爆炸的时代已经到来。如何有效地处理、分析这些海量的数据资源，成为各大技术厂商争在激烈的竞争中脱颖而出的一个利器。可以说，如果不能很好的快速处理分析这些海量的数据资源，将很快被市场无情地所淘汰。当然，处理分析这些海量数据目前可以借鉴的方案有很多：首先，在分 阅读全文
posted @ 2016-04-04 23:01 Newland 阅读(17097) 评论(13) 推荐(13) 编辑

点击右上角即可分享
微信分享提示