随笔分类 -  storm

摘要:1.概述 大数据时代,数据的存储与挖掘至关重要。企业在追求高可用性、高扩展性及高容错性的大数据处理平台的同时还希望能够降低成本,而Hadoop为实现这些需求提供了解决方案。面对Hadoop的普及和学习热潮,笔者愿意分享自己多年的开发经验,带领读者比较轻松地掌握Hadoop数据挖掘的相关知识。这边是笔 阅读全文
posted @ 2018-06-22 20:52 哥不是小萝莉 阅读(4108) 评论(2) 推荐(2) 编辑
摘要:1.Overview Ambari是Apache推出的一个集中管理Hadoop的集群的一个平台,可以快速帮助搭建Hadoop及相关以来组件的平台,管理集群方便。这篇博客记录Ambari的相关问题和注意事项。方便为初学者省去搭配各个社区版的烦恼。2.How to works 在Ambari的官方W... 阅读全文
posted @ 2015-12-21 14:47 哥不是小萝莉 阅读(5267) 评论(3) 推荐(3) 编辑
摘要:1.概述 本课程的视频教程地址:《Kafka实战项目之编码实践》 该课程我以用户实时上报日志案例为基础,带着大家去完成各个KPI的编码工作,实现生产模块、消费模块,数据持久化,以及应用调度等工作, 通过对这一系列流程的演示,让大家能够去掌握Kafka项目的相关编码以及调度流程。下面,我们首先来预... 阅读全文
posted @ 2015-10-15 10:50 哥不是小萝莉 阅读(2904) 评论(3) 推荐(3) 编辑
摘要:1.概述 JStorm 是一个类似于 Hadoop 的MapReduce的计算系统,它是由Alibaba开源的实时计算模型,它使用Java重写了原生的Storm模型(Clojure和Java混合编写的),并且再原来的基础上做了许多改进。用户只需按照指定的接口实现一个任务,然后将这个任务提交给JSt... 阅读全文
posted @ 2015-09-15 15:14 哥不是小萝莉 阅读(13632) 评论(11) 推荐(2) 编辑
摘要:1.概述 本课程的视频教程地址:《Kafka实战项目之分析与设计》 本课程我通过一个用户实时上报日志案例作为基础,带着大家去分析Kafka这样一个项目的各个环节,从而对项目的整体设计做比较合理的规划,最终让大家能够通过本课程去掌握类似Kafka项目的分析与设计。下面,我给大家介绍本课程包含的课时... 阅读全文
posted @ 2015-09-07 16:13 哥不是小萝莉 阅读(6738) 评论(2) 推荐(3) 编辑
摘要:1.概述 本课程的视频教程地址:《Kafka实战项目之应用概述》 本课程是通过一个用户实时上报日志来展开的,通过介绍 Kafka 的业务和应用场景,并带着大家搭建本 Kafka 项目的实战开发环境。下面我们来看看本课程有哪些课时,如下图所示: 接下来,我们开始第一课时的学习:《Kafka 回顾... 阅读全文
posted @ 2015-08-13 11:09 哥不是小萝莉 阅读(4634) 评论(0) 推荐(3) 编辑
摘要:1.概述 经过前面Kafka实战系列的学习,我们通过学习《Kafka实战-入门》了解Kafka的应用场景和基本原理,《Kafka实战-Kafka Cluster》一文给大家分享了Kafka集群的搭建部署,让大家掌握了集群的搭建步骤,《Kafka实战-实时日志统计流程》一文给大家讲解一个项目(或者说... 阅读全文
posted @ 2015-07-15 14:32 哥不是小萝莉 阅读(12344) 评论(4) 推荐(2) 编辑
摘要:1.概述 在《Kafka实战-Flume到Kafka》一文中给大家分享了Kafka的数据源生产,今天为大家介绍如何去实时消费Kafka中的数据。这里使用实时计算的模型——Storm。下面是今天分享的主要内容,如下所示:数据消费Storm计算预览截图 接下来,我们开始分享今天的内容。2.数据消费 ... 阅读全文
posted @ 2015-07-09 11:29 哥不是小萝莉 阅读(22892) 评论(0) 推荐(6) 编辑
摘要:1.概述 在《Kafka实战-实时日志统计流程》一文中,谈到了Storm的相关问题,在完成实时日志统计时,我们需要用到Storm去消费Kafka Cluster中的数据,所以,这里我单独给大家分享一篇Storm Cluster的搭建部署。以下是今天的分享目录:Storm简述基础软件安装部署效果预览... 阅读全文
posted @ 2015-06-18 10:56 哥不是小萝莉 阅读(4747) 评论(0) 推荐(3) 编辑

点击右上角即可分享
微信分享提示