09 2019 档案

摘要:0x00 概述 本文主要介绍了如何利用Kafka自带的性能测试脚本及Kafka Manager测试Kafka的性能,以及如何使用Kafka Manager监控Kafka的工作状态,最后给出了Kafka的性能测试报告。 0x01 性能测试及集群监控工具 Kafka提供了非常多有用的工具,如Kafka设 阅读全文
posted @ 2019-09-30 13:33 时光飞逝,逝者如斯 阅读(928) 评论(0) 推荐(0) 编辑
摘要:0x00 摘要 本文主要介绍了Kafka High Level Consumer,Consumer Group,Consumer Rebalance,Low Level Consumer实现的语义,以及适用场景。以及未来版本中对High Level Consumer的重新设计–使用Consumer 阅读全文
posted @ 2019-09-30 13:12 时光飞逝,逝者如斯 阅读(247) 评论(0) 推荐(0) 编辑
摘要:0x00 摘要 本文在上篇文章基础上,更加深入讲解了Kafka的HA机制,主要阐述了HA相关各种场景,如Broker failover,Controller failover,Topic创建/删除,Broker启动,Follower从Leader fetch数据等详细处理过程。同时介绍了Kafka提 阅读全文
posted @ 2019-09-30 10:35 时光飞逝,逝者如斯 阅读(159) 评论(0) 推荐(0) 编辑
摘要:0x00 摘要 Kafka在0.8以前的版本中,并不提供High Availablity机制,一旦一个或多个Broker宕机,则宕机期间其上所有Partition都无法继续提供服务。若该Broker永远不能再恢复,亦或磁盘故障,则其上数据将丢失。而Kafka的设计目标之一即是提供数据持久化,同时对于 阅读全文
posted @ 2019-09-30 10:01 时光飞逝,逝者如斯 阅读(181) 评论(0) 推荐(0) 编辑
摘要:0x00 概述 本文介绍了Kafka的创建背景,设计目标,使用消息系统的优势以及目前流行的消息系统对比。并介绍了Kafka的架构,Producer消息路由,Consumer Group以及由其实现的不同消息分发方式,Topic & Partition,最后介绍了Kafka Consumer为何使用p 阅读全文
posted @ 2019-09-23 11:12 时光飞逝,逝者如斯 阅读(264) 评论(0) 推荐(0) 编辑
摘要:0x00 概述 随着苹果 macOS Mojave 正式版发布,很多使用 Mac 电脑的同学都已升级到最新版了。但如果你对系统有洁癖或原本系统已凌乱不堪,那么可能还是希望能格式化「全新安装 macOS」的。 不过由于苹果官方只提供了 macOS 的升级程序,并没提供完整 dmg 镜像,想要全新安装的 阅读全文
posted @ 2019-09-23 11:12 时光飞逝,逝者如斯 阅读(1142) 评论(0) 推荐(0) 编辑
摘要:0x00 概述 filebeat非常轻量级,正常情况下占用的资源几乎都能忽略不计,但是部署后发现资源占用很大,所以怀疑是filebeat本身出了问题。 第一时间查看filebeat日志(默认路径/var/log/filebeat/filebeat,K8S需要在控制台实时查看pod的日志),发现有大量 阅读全文
posted @ 2019-09-03 19:07 时光飞逝,逝者如斯 阅读(1259) 评论(0) 推荐(0) 编辑