摘要：
一、描述 1、nginx配置转发的时候使用的是域名，即使用dns服务方便配置和负载。但是nginx默认会进行缓存，当域名对应的服务出问题的时候就会报错，只有默认的缓存时间到了才会再次进行解析,nginx在resolver后面有个参数valid设置缓存过期时间。并使用set强制解析（又个弊端，就是不会 阅读全文
摘要：
一、概述 前面我们部署calico由于集群规模不是很大，使用的是calico的bgp模式的node-to-node-mesh全节点互联，这种模式在小规模集群里面还可以用，3.4.0版本的calico支持到100多个节点。 但是随着集群规模的扩大，bgp的mesh会变得很混乱，因为node-to-no 阅读全文
摘要：
一、概述 k8s暴露服务的方式有很多使用ingress、nodeport等，这类比较适用于无状态的服务，对于statefulset部署的有状态的服务，（关于statefulset的介绍参考kubernetes的官网或参考我的https://www.cnblogs.com/cuishuai/p/102 阅读全文
摘要：
一、概述 kubernetes使用etcd作为数据中心，使用kubeadm部署kubernetes的时候默认会自己部署一个etcd，当然也可以将kubeadm部署的单点的etcd做成集群，但是比较麻烦，所以我们使用的是自建 的etcd集群即external etcd cluster。在使用kubea 阅读全文
摘要：
一、概述 在k8s里面部署kafka、zookeeper这种有状态的服务，不能使用deployment和RC，k8s提供了一种专门用来部署这种有状态的服务的API--statefulset，有状态简单来说就是需要持久化数据，比如日志、数据库数据、服务状态等。 statefulset应用场景： 稳定的 阅读全文
摘要：
一、概述 hadoop的namenode和secondarynamenode： 1. namenode负责 负责客户端请求的响应 元数据的管理（查询，修改） 2. 元数据管理 namenode对数据的管理采用了三种存储形式： 内存元数据(NameSystem) 磁盘元数据镜像文件 数据操作日志文件（ 阅读全文
摘要：
1、kubernetes1.13之后kubeadm开始GA，由于1.13的kube-proxy有bug，删除ipvs的地方总是导致kube-proxy挂掉，所以建议直接用1.13.2，这个版本解决了bug。 ！Fix race condition introduced by graceful ter 阅读全文
摘要：
k8s升级，此次升级是1.12.0 至1.13.2 准备 [upgrade/versions] Latest version in the v1.12 series: v1.13.2 External components that should be upgraded manually befor 阅读全文
摘要：
一、概述 公司使用是自己搭建的hadoop集群，版本2.7.3，最近发现出现了hdfs数据存储不均衡的现象，其中有一个datanode使用了65%，而有一个只使用了20%。hadoop集群使用的时间长了会出现这种数据不均衡的问题，当然hadoop提供了解决方案，就是使用balancer，默认进行的是 阅读全文
摘要：
一、概述 使用elasticsearch收集日志进行处理，时间久了，很老的数据就没用了或者用途不是很大，这个时候就要对过期数据进行清理.这里介绍两种方式清理这种过期的数据。 1、curator 关于版本： 安装： https://www.elastic.co/guide/en/elasticsear 阅读全文