容器集群环境网络排查

问题现象

      kafka的一个topic被两个服务连接导致有两个消费组

       

 排查步骤

      1.登录两台主机查看端口连接情况

         登录79主机查看

           

        2.登录175主机进行交叉验证

         

       3.查看79主机所有服务的配置文件

              

        4.修改配置文件中的ip地址后,重启79上的所有服务

              

                

 结果验证

            cd /opt/bitnami/kafka/bin  &&  ./kafka-consumer-groups.sh --describe --bootstrap-server 192.168.30.79:9092 --all-groups

             

            重启后kafka消费组连接到正确的kafka服务主机上

容器启动异常排查

         把容器持久化目录迁移到一个大磁盘目录并创建相应的软连接后,rancher所管理的中间件容器服务就一直启动失败

         拷贝后持久化目录的所属用户和目录权限发生了变化,导致相关容器服务一直启动失败

         chown -R root:root  /data/persistence-data/mysql

         chmod 777 -R /data/persistence-data/mysql

         如果容器挂载的目录属主和权限不对的话都会启动失败

        

         

        

         所有服务重启成功