05 2017 档案

57.storm拓扑结构调整
摘要:几个概念 Topology(拓扑):Spout、Bolt组成的一个完整的流程结构; Stream Grouping:流分组、数据的分发方式; Spout:直译 水龙头,也就是 消息源 的意思; Bolt:螺栓、处理器。很形象,水从上面的那个“水龙头”流出来,经过第一个螺栓,经过第二个螺栓,经过第三第 阅读全文

posted @ 2017-05-20 19:35 司广孟 阅读(877) 评论(2) 推荐(0)

一些linux命令
摘要:转自:http://www.fx114.net/qa-81-151600.aspx 一些杂琐的东西,记录一下,以后可能会用得上,另外以后遇到可以记录的可以追加在这里 查找进程内最耗费CPU的线程: jmap导出java进程内存情况并用jhat分析 storm相关进程启动命令: jstorm相关进程启 阅读全文

posted @ 2017-05-20 10:31 司广孟 阅读(316) 评论(0) 推荐(0)

56.storm 之 hello world (集群模式)
摘要:回顾 在上一小节,我们在PWTopology1 这一个java类中注解掉了集群模式,使用本地模式大概了解一下storm的工作流程。这一节我们注解掉本地模式相关的代码,放开集群模式相关代码,并且将项目打包,在实际环境中运行一下。 集群模式部署步骤 项目打包 pom.xml右键 --> run as - 阅读全文

posted @ 2017-05-19 00:02 司广孟 阅读(406) 评论(0) 推荐(0)

55.storm 之 hello word(本地模式)
摘要:strom hello word 概述 然后卡一下代码怎么实现的: 实际操作 先来看一下代码结构: 就如上图所说,数据从PWSpout流到PrintBolt,最后到WriteBolt写到文件。具体看一下这几个类的代码: 先看一本地模式的: PWTopology1.java 拓扑结构构建 代码分析: 阅读全文

posted @ 2017-05-18 00:04 司广孟 阅读(1278) 评论(0) 推荐(0)

54.Storm环境搭建
摘要:集群环境搭建 实际操作 storm包解压后的目录结构是这样的: 再到bin里面看看: 再看一下conf目录,可见我们需要配置的文件: 首先配置一下storm的profile全局环境(三台机器都要配置): 在来配置一下storm.yaml文件(三台机器都要配置),要注意短线前后的空格: 配置好后启动z 阅读全文

posted @ 2017-05-16 23:39 司广孟 阅读(246) 评论(0) 推荐(0)

53.storm简介
摘要:一、简介 1.storm是twitter开源的一个分布式的实时计算系统,用于数据实时分析,持续计算,分布式RPC等等。 官网地址:http://storm-project.net 源码地址:https://github.com/nathanmarz/storm Jstorm实现高可用。 2.实时计算 阅读全文

posted @ 2017-05-12 17:23 司广孟 阅读(306) 评论(0) 推荐(0)

深入浅出Mybatis-分页
摘要:出处:http://blog.csdn.net/hupanfeng/article/details/9265341 Mybatis的分页功能很弱,它是基于内存的分页(查出所有记录再按偏移量和limit取结果),在大数据量的情况下这样的分页基本上是没有用的。本文基于插件,通过拦截StatementHa 阅读全文

posted @ 2017-05-11 14:03 司广孟 阅读(521) 评论(0) 推荐(0)

storm:最火的流式处理框架
摘要:本文出处:www.cnblogs.com/langtianya/p/5199529.html 伴随着信息科技日新月异的发展,信息呈现出爆发式的膨胀,人们获取信息的途径也更加多样、更加便捷,同时对于信息的时效性要求也越来越高。举个搜索场景中的例子,当一个卖家发布了一条宝贝信息时,他希望的当然是这个宝贝 阅读全文

posted @ 2017-05-07 22:58 司广孟 阅读(1518) 评论(0) 推荐(1)

UML入门 之 交互图 -- 时序图 协作图详解
摘要:作者 : 万境绝尘 转载请注明出处 : http://blog.csdn.net/shulianghan/article/details/17927131 动态图概念 : 从静态图中抽取瞬间值的变化描述系统随时间变化的行为, 动态图包括交互图活动图状态图, 这篇博客研究交互图 包括时序图和协作图; 阅读全文

posted @ 2017-05-05 16:49 司广孟 阅读(2191) 评论(0) 推荐(0)

spring基础回顾
摘要:1、什么是Spring框架?Spring框架有哪些主要模块? Spring框架是一个为Java应用程序的开发提供了综合、广泛的基础性支持的Java平台。Spring帮助开发者解决了开发中基础性的问题,使得开发人员可以专注于应用程序的开发。Spring框架本身亦是按照设计模式精心打造,这使得我们可以在 阅读全文

posted @ 2017-05-03 23:35 司广孟 阅读(264) 评论(0) 推荐(0)

导航