摘要: Kafka特性 顺序读写(高吞吐) 吞吐率可以水平拓展 消息可以保存 发送消息可以指定key,producer根据key和patition机制来判断将消息发送到那个partition 一般partition的数量大于broker以便均匀分配到broker上 如何为kafka集群选择合适的topic数 阅读全文
posted @ 2018-03-07 16:15 侯光辉 阅读(173) 评论(0) 推荐(0) 编辑
摘要: config/server.properties 数据存储的最大时间超过这个时间会根据log.cleanup.policy设置的策略处理数据,也就是消费端能够多久去消费数据 log.retention.bytes和log.retention.minutes任意一个达到要求,都会执行删除,会被topi 阅读全文
posted @ 2018-03-07 15:36 侯光辉 阅读(193) 评论(0) 推荐(0) 编辑
摘要: kafka是一个分布式的、可分区的、可复制的消息系统。 几个消息系统术语 阅读全文
posted @ 2018-03-07 14:01 侯光辉 阅读(123) 评论(0) 推荐(0) 编辑
摘要: 为什么要用消息队列? 解耦 冗余 拓展性 灵活性&峰值处理能力 可恢复性 送达保证 顺序保证 缓冲(发送数据不可能实时,进行缓冲。保证最快送达) 异步通信 常用消息队列 RabbitMQ:支持协议多,挒如AMQP、XMPP、SMTP、STOMP。对路由、负载均衡、数据持久化很好支持 Redis:轻量 阅读全文
posted @ 2018-03-07 11:29 侯光辉 阅读(132) 评论(0) 推荐(0) 编辑
摘要: 引言 hadoop出来已经很久了,一直没有自己配置过、参考 http://blog.csdn.net/wangjia55/article/details/53160679 完成hadoop的配置, 再此记录。本次使用环境 ubuntu12.04 、 hadoop-2.7.5.tar.gz 简介 一、 阅读全文
posted @ 2018-03-01 11:44 侯光辉 阅读(114) 评论(0) 推荐(0) 编辑
摘要: 1.下载 min-gw 安装程序 http://sourceforge.net/projects/mingw/files/ 安装并配置path默认(C:\MinGw\bin) 2.打开cmd输入 mingw-get 测试安装是否成功,成功会弹出 3.关闭窗口(必须)cmd 运行 mingw-get 阅读全文
posted @ 2018-02-05 18:09 侯光辉 阅读(299) 评论(0) 推荐(0) 编辑
摘要: spring.thymeleaf.mode=LEGACYHTML5 maven依赖 net.sourceforge.nekohtml nekohtml 阅读全文
posted @ 2018-02-05 14:46 侯光辉 阅读(1053) 评论(0) 推荐(0) 编辑
摘要: nohup(n ohang up) 用途:挂起执行(执行时不会挂载在终端上) 常用的三种流0:stdin 标准输入1:stdout 标准输出2:stderror 标准错误带有&运行时,即使terminal(终端)关闭、电脑死机,程序仍然执行尖括号是重定向符号, 2>&1把标准错误定向到标准输出里, 阅读全文
posted @ 2018-02-01 16:10 侯光辉 阅读(474) 评论(0) 推荐(0) 编辑
摘要: 1. partial partial是“部分的”意思。在c#中,为了方便的对代码管理和编辑,可以用pritial关键字将同一个类的代码分开放在多个文件中。每个文件都是类的一部分代码,也叫做分布类,会被编译器当作一个类处理 2.form form 是 。NET Framework 定义好的一个最基本的 阅读全文
posted @ 2016-08-06 20:07 侯光辉 阅读(5433) 评论(0) 推荐(0) 编辑