11 2018 档案
摘要：一、概述 公司使用是自己搭建的hadoop集群，版本2.7.3，最近发现出现了hdfs数据存储不均衡的现象，其中有一个datanode使用了65%，而有一个只使用了20%。hadoop集群使用的时间长了会出现这种数据不均衡的问题，当然hadoop提供了解决方案，就是使用balancer，默认进行的是
阅读全文
摘要：一、概述 使用elasticsearch收集日志进行处理，时间久了，很老的数据就没用了或者用途不是很大，这个时候就要对过期数据进行清理.这里介绍两种方式清理这种过期的数据。 1、curator 关于版本： 安装： https://www.elastic.co/guide/en/elasticsear
阅读全文
摘要：1、在使用docker的时候有很多人习惯使用官方镜像、有的人喜欢自己制作镜像，有的时候都是使用默认的配置启动的服务，或者自己在制作镜像的时候直接将配置文件打包到镜像里面了。有的时候会碰到要修改配置文件的情况，而又不想麻烦去创建一次镜像，可以直接进入到docker container里面去修改文件。但
阅读全文
摘要：一、概述 主要介绍搭建流程及使用注意事项，如果线上使用的话，请务必做好相关测试及压测。 1、基础环境准备 系统：ubuntu TLS 16.04 5台 docker-ce：17.06.2 kubeadm、kubelet、kubectl：1.12.0 keepalived、haproxy etcd-3
阅读全文
摘要：一、概述 使用metric-server收集数据给k8s集群内使用，如kubectl,hpa,scheduler等 使用prometheus-operator部署prometheus，存储监控数据 使用kube-state-metrics收集k8s集群内资源对象数据 使用node_exporter收
阅读全文
