报错：Bootstrap broker basecoalmine:2181 (id: -1 rack: null) disconnected (org.apache.kafka.clients.NetworkClient)
摘要：报错背景： 新安装的单机版kafka启动消费者的时候报错！ 报错现象： [2020-05-19 22:08:04,053] WARN [Consumer clientId=consumer-console-consumer-36457-1, groupId=console-consumer-3645
阅读全文
posted @
2020-05-19 22:21
吹静静
阅读(18812)
推荐(1) 编辑
Linux下批量删除redis集群中的key
摘要：shell脚本：redis-del.sh #!/bin/bash redis_ser01=192.168.10.42 redis_ser02=192.168.10.43 redis_ser03=192.168.10.44 redis_port1=6379 redis_port2=6380 pw=pa
阅读全文
posted @
2020-05-16 11:43
吹静静
阅读(2351)
推荐(0) 编辑
Kafka历史数据保存策略配置
摘要：进入kafka配置文件，修改 server.properties 文件。 1 log.retention.hours=1 # 超过1个小时就清理数据 2 log.segment.bytes=5000 # 数据量超过5000byte就清理数据 3 log.cleanup.interval.mins=1
阅读全文
posted @
2020-05-14 20:47
吹静静
阅读(3620)
推荐(0) 编辑
报错：exception: java.lang.reflect.InvocationTargetException: null
摘要：报错背景 Java代码偶然报错，但是正常情况下运行不会报错。 报错现象 exception: java.lang.reflect.InvocationTargetException: null 2020-05-11 at 15:17:39 CST traceId:[] ERROR io.netty.
阅读全文
posted @
2020-05-11 17:07
吹静静
阅读(13149)
推荐(0) 编辑
报错（未解决）：Offset commit failed on partition xxx at offset 957: The coordinator is not aware of this member.
摘要：1.报错背景 服务器：Linux集群 3台，32GB内存； Kafka创建了大约140个Topic，和与Topic数目相同的Consumer，设置分区数量不祥； 每个Consumer都在GroupId，没有单独的standalone consumer； 项目在运行过程中突然出现了大量分区提交失败的现
阅读全文
posted @
2020-05-07 23:25
吹静静
阅读(26416)
推荐(1) 编辑
Redis配置文件详解
摘要：1.Redis文件目录 （1）全局搜索配置文件 redis.conf 所在目录，和Redis相关的参数配置都在此目录下设置。 [root@bigdata1 ~]# find / -name redis.conf （2）命令所在目录 在Redis安装目录下的bin目录，例如：/opt/redis-5.
阅读全文
posted @
2020-05-05 23:21
吹静静
阅读(2161)
推荐(0) 编辑
管理
