Kafka磁盘满了导致Kafka挂掉问题处理

1、查看磁盘情况

df -h

2、从根目录查找哪个文件夹占用的磁盘最多

du -h --max-depth=1 /

  我们发现/usr和/data目录占用最多,先进入/data目录查看

cd /data

  查看/data目录下哪个文件夹占用磁盘多

du -sh *

  发现/data/kafka占用比较多,这个目录是kafka的数据存放目录,kafka数据的过期策略是三天,因此这个目录不需要进行清理,因为清理之后Kafka数据就没了。

  但是我们可以看看是哪个topic占用磁盘最多,进入到数据目录

cd /data/kafka/logs
du -sh *

  发现mmportal-log-serilog主题占用达到42G。

  接下来我们进入/usr目录进行查看

cd /usr
du -sh *

  继续进入/usr/local

cd /usr/local
du -sh *

  /usr/local/kafka/log目录是kafka日志存放目录,我们可以将其清理掉一些

cd /usr/local/kafka/log
rm -rf state-change.log.*
rm -rf server.log.*
rm -rf log-cleaner.log.*
rm -rf controller.log.*
rm -rf kafkaServer-gc.log.*

  完成之后再次查看磁盘情况,发现已经有34G的可用磁盘了

3、最后启动kafka即可

posted @ 2022-10-13 10:11  落魄的大数据转AI小哥  阅读(3229)  评论(1编辑  收藏  举报