随笔分类 -  Kafka

摘要:一、Kafka Eagle 1.1、Eagle安装 4)修改环境变量 6)使用docker安装mysql 安装docker: 安装mysql: 创建数据库: 7)启动 1.2、Eagle简单使用 1)启动消费者 2)eagle中查看topic及消费者 3)启动生产者 4)查看 5)Brokers监控 阅读全文
posted @ 2021-02-05 16:33 运维人在路上 阅读(1379) 评论(0) 推荐(0) 编辑
摘要:一、Producer API 1.1、消息发送流程 1.2、异步发送API 1)导入依赖 1.3、同步发送 API 二、Consumer API 2.1、自动提交 offset 2.2、手动提交 offset 2.3、自定义存储 offset 三、自定义 Interceptor 3.1、拦截器原理 阅读全文
posted @ 2021-02-04 14:25 运维人在路上 阅读(158) 评论(0) 推荐(0) 编辑
摘要:一、Kafka 工作流程及文件存储机制 二、Kafka 生产者 2.1、分区策略 2.2、数据可靠性保证 2.2.1、副本数据同步策略 半数以上完成同步就发送ack 延迟低 选举新的 leader 时,容忍 n 台 节点的故障,需要 2n+1 个副 本 选举新的 leader 时,容忍n 台 节点的 阅读全文
posted @ 2021-02-03 14:17 运维人在路上 阅读(258) 评论(0) 推荐(0) 编辑
摘要:一、Kafka概述 1.1、定义 1.2、消息队列 1.2.1、消息队列的应用场景 1.2.2、消息队列的好处 1)解耦 1.2.3、消息队列的两种模式 二、Kafka基础架构 三、Kafka集群安装 3.1、集群规划 3.2、软件下载 官网:http://kafka.apache.org/down 阅读全文
posted @ 2021-01-29 12:09 运维人在路上 阅读(4125) 评论(0) 推荐(0) 编辑