摘要:
filebeat搜集的速度跟不上日志打印的速度 问题:filebeat读取k8s container日志,生产到kafka过程中,出现丢数据。如下图实际生产了1w+日志,但只生产了5746条 定位: 因为是EFK流程,首先,需要确定是生产还是消费出现了问题,直接kafka命令行使用另外的消费组消费同 阅读全文
摘要:
系列导航 一、linux单机版mongo安装(带密码验证) 二、mongo集群搭建 三、java连接mongo数据库 四、java对mongo数据库增删改查操作 五、mongo备份篇 mongoexport、mongoimport 以及mongodump、mongorestore 如下是总结mong 阅读全文
摘要:
1. mongo单机安装mongo版本:4.4.19服务器版本:CentOS Linux release 7.9.2009 cd /etc/yum.repos.d/ touch mongodb-org-4.4.repo [mongodb-org-4.4]name=MongoDB Repository 阅读全文
摘要:
https://github.com/AliyunContainerService/DevOps 阅读全文
摘要:
什么是 Sharding Sphere Apache ShardingSphere(Incubator) 是一套开源的分布式数据库中间件解决方案组成的生态圈。 组成: 1.Sharding-JDBC 2.Sharding-Proxy 3.Sharding-Sidecar功能:提供标准化的数据分片、分 阅读全文
摘要:
微服务架构已经是一个很通用的系统架构,常见的技术栈如下图所示,这张架构图基本涵括了当前微服务体系下的各种技术栈,可能不同的技术栈有不同的开源实现。 Screen Shot 2022-01-23 at 12.48.19 PM.png 今天主要介绍Skywalking,数据链路追踪,主要的资料来源于网上 阅读全文
摘要:
作为一种分布式消息队列,Kafka 在实际应用中也可能遇到各种故障,下面列举几种常见的情况和解决方案: 1. 节点宕机 当 Kafka 集群中的某个节点宕机时,可能导致数据不一致、数据丢失等问题。解决方案建议使用多副本机制,即在各个节点之间进行数据的同步和复制,保证集群中的节点宕机时,数据不会丢失。 阅读全文
摘要:
有时候服务器上没有权限配置环境变量,又不想找人,或者机器上有几个版本的JDK,这时可以给tomcat配置临时环境变量,不影响其他应用; 一,对于linux环境 编辑 catalina.sh 文件,在文件开头增加: export JAVA_HOME=/你的jdk目录 二,对于windows环境 编辑 阅读全文
摘要:
识别运维平台的边界在哪儿,才能更好的构建平台,从而协助运维的日常工作。 在之前的文章中,谈到过【运维的本质--可视化】,在可视化的篇幅中,着重介绍自动化的可视化和数据的可视化;在后续的篇章中又介绍了【互联网运维的价值体系】,里面分解了几个维度:质量、成本、效率、安全等。以上都是为了清楚的梳理运维的内 阅读全文
摘要:
一.Byte 与 bit 说明在计算机科学中,bit是表示信息的最小单位,叫做二进制位;一般用0和1表示。Byte叫做字节,由8个位(8bit)组成一个字节(1Byte),用于表示计算机中的一个字符。bit与Byte之间可以进行换算,其换算关系为:1Byte=8bit(或简写为:1B=8b);在实际 阅读全文