随笔分类 -  Kafka

关于kafka启动失败问题
摘要：之前搭建的kafka，过了好久，去启动kafka，发现报如下下面的错误，有错误就要解决了。 上图 创建topic时出了问题，推测是要么是zookeeper要么就是kafka的问题 一步一步往前推 果然是启动kafka时出了问题,通过报警内容可以分析出是Cluster ID不一致造成的 我们找到安装目 阅读全文
posted @ 2021-04-25 11:08 一介桃白白 阅读(1140) 评论(0) 推荐(0) 编辑
redis和kafka区别
摘要：Redis，它首先是一个内存数据库，其提供的PUB/SUB功能把消息保存在内存中(基于channel)，因此如果你的消息的持久性需求并不高且后端应用的消费能力超强的话，使用Redis PUB/SUB是比较合适的使用场景。比如官网说提供的一个网络聊天室的例子：模拟IRC，因为channel就是IRC中 阅读全文
posted @ 2020-11-13 15:05 一介桃白白 阅读(575) 评论(0) 推荐(0) 编辑
Kafka报错ERROR Shutdown broker because all log dirs in ... have failed
摘要：起因是因为打开kafkatool可视化工具时觉得有个测试的topic没用就删掉了，然后恶梦就开始了… 解决方法： 关闭现打开的kafka和zookeeper 删除zookeeper里zoo.cfg里配置的dataDir目录，重启zookeeper 去报错提示的目录下删除log里topic日志，重启k 阅读全文
posted @ 2020-11-13 14:20 一介桃白白 阅读(5488) 评论(0) 推荐(2) 编辑
kafka常见问题汇总
摘要：1、创建主题时失败 原因：主题名称已存在 解决方法：删除此主题再创建、起一个新的主题名称。 阅读全文
posted @ 2020-11-12 16:08 一介桃白白 阅读(178) 评论(0) 推荐(0) 编辑
kafka可视化工具kafkatool
摘要：kafka tool官网下载地址http://www.kafkatool.com/download.html 打开kafkatool后首先创建集群，起一个名称katest（随意起） 修改下通用设置 1、点击tools—settings—选择topics中将key message设置为string 2 阅读全文
posted @ 2020-11-12 16:04 一介桃白白 阅读(359) 评论(0) 推荐(0) 编辑
初识kafka
摘要：初识kafka心中有太多的疑惑，什么是kafka ? 它是用来做什么的 ？ Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据。 简单地说，Kafka就相比是一个邮箱，生产者是发送邮件的人，消费者是接收邮件的人，Kafka就是用来存东西的，只不过它提供了一 阅读全文
posted @ 2020-11-12 09:48 一介桃白白 阅读(95) 评论(0) 推荐(0) 编辑
KAFKA运行环境安装（Windows环境）
摘要：1. 安装JDK 1.1 安装文件：http://www.oracle.com/technetwork/java/javase/downloads/index.html 下载JDK1.2 安装完成后需要添加以下的环境变量（右键点击“我的电脑” -> "高级系统设置" -> "环境变量" ）： JAV 阅读全文
posted @ 2020-11-12 09:37 一介桃白白 阅读(235) 评论(0) 推荐(0) 编辑