GaoYanbing - 博客园

2022年11月17日

摘要：简介： DaemonSet和Sidecar模式各有优缺点，目前没有哪种方式可以适用于所有场景。因此我们阿里云日志服务同时支持了DaemonSet以及Sidecar两种方式，并对每种方式进行了一些额外的改进，更加适用于K8S下的动态场景。 Kubernetes（K8S）作为CNCF（cloud nat 阅读全文

posted @ 2022-11-17 19:20 GaoYanbing 阅读(947) 评论(0) 推荐(0) 编辑

K8S 使用 SideCar 模式部署 Filebeat 收集容器日志

摘要：对于 K8S 内的容器日志收集，业内一般有两种常用的方式：使用 DaemonSet 在每台 Node 上部署一个日志收集容器，用于收集当前 Node 上所有容器挂载到宿主机目录下的日志使用 SideCar 模式将日志收集容器与业务容器部署在同一个 Pod 中，只收集对应容器的日志这两种方式各有阅读全文

posted @ 2022-11-17 17:38 GaoYanbing 阅读(818) 评论(0) 推荐(0) 编辑

kafka报错：Exception in thread “main“ joptsimple.UnrecognizedOptionException: zookeeper is not a recogn

摘要： kafka创建主题topic报错：Exception in thread "main" joptsimple.UnrecognizedOptionException: zookeeper is not a recogn 如图：原因：kafka最新版本创建主题topic方式已经改变，如果仍然按照过去阅读全文

posted @ 2022-11-17 15:39 GaoYanbing 阅读(611) 评论(0) 推荐(0) 编辑

Kafka启动报错：/bin/kafka-run-class.sh: line 258: exec: java: not found

摘要： Kafka启动报错处理：/opt/module/kafka/bin/kafka-run-class.sh: 第 258 行:exec: java: 未找到今天在安装kafka后启动的时候出现了报错： /software/kafka_2.11-0.11.0.0/bin/kafka-run-class 阅读全文

posted @ 2022-11-17 15:11 GaoYanbing 阅读(735) 评论(0) 推荐(0) 编辑

如何在CentOS 7上安装Apache Kafka

摘要：介绍 Apache Kafka是一种流行的分布式消息代理，旨在有效处理大量实时数据。Kafka集群不仅具有高度可扩展性和容错性，而且与其他消息代理（如ActiveMQ和RabbitMQ相比，它还具有更高的吞吐量。虽然它通常用作发布/订阅消息传递系统，但许多组织也将其用于日志聚合，因为它为已发布的消息阅读全文

posted @ 2022-11-17 15:11 GaoYanbing 阅读(238) 评论(0) 推荐(0) 编辑

2022年11月16日

Filebeat在Kubernetes集群中的最佳实践

摘要： 1 背景在Kubernetes还未兴起的时代，业务部署几乎所有应用都采用单机部署，当压力增大时，IDC架构只能横向拓展服务器集群，增加算力，云计算兴起后，可以动态的调整已有服务器的配置，来分担压力，或者可以通过弹性伸缩来实现根据业务量大小、集群负载、监控等情况，动态的横向调整后端服务器的数量。日志阅读全文

posted @ 2022-11-16 19:43 GaoYanbing 阅读(579) 评论(0) 推荐(0) 编辑

Kubernetes--->Pod的状态为Evicted

摘要：遇到的问题： kubectl get pods 发现很多pod的状态为evicted。复制原因 eviction，即驱赶的意思，意思是当节点出现异常时，kubernetes将有相应的机制驱赶该节点上的Pod。多见于资源不足时导致的驱赶。复制更多详情参考 kubernetes的evictio 阅读全文

posted @ 2022-11-16 16:09 GaoYanbing 阅读(160) 评论(0) 推荐(0) 编辑

K8s中大量Pod是Evicted状态，这是咋回事？

摘要：线上被驱逐实例数据最近在线上发现很多实例处于 Evicted 状态，通过 pod yaml 可以看到实例是因为节点资源不足被驱逐，但是这些实例并没有被自动清理，平台的大部分用户在操作时看到服务下面出现 Evicted 实例时会以为服务有问题或者平台有问题的错觉，影响了用户的体验。而这部分 Evic 阅读全文

posted @ 2022-11-16 16:08 GaoYanbing 阅读(8329) 评论(0) 推荐(1) 编辑

2022年11月15日

使用Filebeat收集K8S应用日志

摘要：简介： Logstash收集Kubernetes的应用日志，发现logstash十分消耗内存（大约500M），而改用filebeat（大约消耗10多M内存）。在进行日志收集的过程中，我们首先想到的是使用Logstash，因为它是ELK stack中的重要成员，但是在测试过程中发现，Logsta 阅读全文

posted @ 2022-11-15 17:21 GaoYanbing 阅读(1254) 评论(0) 推荐(0) 编辑

2022年11月10日

Centos7下杀毒软件clamav的安装和使用

摘要：一、yum安装安装后会自动生成服务文件，启动服务后，可使用clamdsacn命令，扫描速度快；启动服务后，会实时监控扫描连接，虽然安全性高了，不过可能会对服务器性能有影响； 1 yum install clamav clamav-server clamav-data clamav-update 阅读全文

posted @ 2022-11-10 20:12 GaoYanbing 阅读(1147) 评论(0) 推荐(0) 编辑

Balance

公告