时光飞逝，逝者如斯

2019年6月25日

摘要：详细参考这篇文章，几乎覆盖了了K8S的各种日志搜集方案 https://juejin.im/post/5b6eaef96fb9a04fa25a0d37#heading-8 阅读全文

posted @ 2019-06-25 11:10 时光飞逝，逝者如斯阅读(600) 评论(0) 推荐(0) 编辑

摘要： 0x00 关于Vim Vim是款强大的文本编辑器，但是众多指令需要学习，这次记录了指令大全方便以后翻阅。 Vim的几种模式正常模式：可以使用快捷键命令，或按:输入命令行。插入模式：可以输入文本，在正常模式下，按i、a、o等都可以进入插入模式。可视模式：正常模式下按v可以进入可视模式，在可视模阅读全文

posted @ 2019-06-25 11:10 时光飞逝，逝者如斯阅读(759) 评论(0) 推荐(0) 编辑

K8S学习笔记之Kubernetes 配置管理 ConfigMap

摘要： 0x00 概述很多情况下我们为某一应用做好镜像，当我们想修改其中的一些参数的时候，就变得比较麻烦，又要重新制作镜像，我们是不是有一种方式，让镜像根据不同的场景调用我们不同的配置文件呢，那我们就需要用到 k8s 的另外一种资源，那就是 ConfigMap。我们知道，在几乎所有的应用开发中，都会涉及阅读全文

posted @ 2019-06-25 11:10 时光飞逝，逝者如斯阅读(1148) 评论(0) 推荐(0) 编辑

K8S学习笔记之使用Fluent-bit将容器标准输入和输出的日志发送到Kafka

摘要： 0x00 概述 K8S内部署微服务后，对应的日志方案是不落地方案，即微服务的日志不挂在到本地数据卷，所有的微服务日志都采用标准输入和输出的方式(stdin/stdout/stderr)存放到管道内，容器日志采用的是json格式。目前大部分K8S容器日志都采用Fluent或者Fluent-bit，将阅读全文

posted @ 2019-06-25 09:34 时光飞逝，逝者如斯阅读(3823) 评论(0) 推荐(0) 编辑

2019年6月18日

Linux学习笔记之iptables学习笔记

摘要： iptables系列学习推荐： http://www.zsythink.net/archives/category/%e8%bf%90%e7%bb%b4%e7%9b%b8%e5%85%b3/iptables/ 阅读全文

posted @ 2019-06-18 17:06 时光飞逝，逝者如斯阅读(167) 评论(0) 推荐(0) 编辑

2019年6月17日

Linux学习笔记之秋水BBR一键部署

摘要： 0x00 本脚本适用环境系统支持：CentOS 6+，Debian 7+，Ubuntu 12+内存要求：≥128M 阅读文章时请除手动删出干扰字符“1”.（Shado1wsocks） 0x01 关于本脚本 1、一键安装 Shadow1socks-Python， Shado1wsocksR， Sha 阅读全文

posted @ 2019-06-17 13:42 时光飞逝，逝者如斯阅读(2020) 评论(0) 推荐(0) 编辑

2019年5月27日

ELK学习笔记之Kibana查询和使用说明

摘要： 0x00 概述 elasticsearch构建在Lucene之上，过滤器语法和Lucene相同 Kibana接口概述 Kibana接口分为四个主要部分：发现可视化仪表板设置我们将按照列出的顺序浏览每个部分的基础知识，并演示如何使用每个接口。 0x01 Kibana探索当您第一次连接到Ki 阅读全文

posted @ 2019-05-27 18:07 时光飞逝，逝者如斯阅读(2264) 评论(0) 推荐(0) 编辑

K8S学习笔记之Grafana App for Kubernetes的配置

摘要： Grafana有一套针对Kubernetes监控的APP，和Grafana-Zabbix App类似，但是配置咋一看比较麻烦，主要参数都是来自K8S。这款APP的详细介绍请参考Grafana App for Kubernetes 注意：当你填写了以上信息，你相当于把K8S集群的钥匙交给了Grafa 阅读全文

posted @ 2019-05-27 18:04 时光飞逝，逝者如斯阅读(365) 评论(0) 推荐(0) 编辑

K8S学习笔记之k8s使用ceph实现动态持久化存储

摘要： 0x00 概述本文章介绍如何使用ceph为k8s提供动态申请pv的功能。ceph提供底层存储功能，cephfs方式支持k8s的pv的3种访问模式ReadWriteOnce，ReadOnlyMany ，ReadWriteMany ，RBD支持ReadWriteOnce，ReadOnlyMany两种模阅读全文

posted @ 2019-05-27 18:04 时光飞逝，逝者如斯阅读(1123) 评论(0) 推荐(0) 编辑

Linux学习笔记之Centos7 自定义systemctl服务脚本

摘要： 0x00 概述之前工作环境一直使用Centos6版本，脚本一直在使用/etc/init.d/xxx；系统升级到Cento7后，虽然之前的启动脚本也可以使用，但一直没有使用systemctl 的自定义脚本。本篇文章用于总结下，具体的使用方式。Centos7 开机第一程序从init完全换成了syst 阅读全文

posted @ 2019-05-27 18:03 时光飞逝，逝者如斯阅读(562) 评论(0) 推荐(0) 编辑

ELK学习笔记之Kibana权限控制和集群监控

摘要：详细请参考如下四篇博客，注意ELK6中移除了Xpack的默认账户和密码，需要手动设置 Kibana安全特性之权限控制 ELK 集群 Kibana 使用 X-Pack 权限控制，监控集群状态，警报，监视,cpu，内存，磁盘空间，报告和的可视化图形 Kibana中的X-Pack设置解释生产环境中使用阅读全文

posted @ 2019-05-27 18:03 时光飞逝，逝者如斯阅读(792) 评论(0) 推荐(0) 编辑

ELK学习笔记之ELK6.0 X-pack设置用户名和密码

摘要：官方文档阅读全文

posted @ 2019-05-27 10:46 时光飞逝，逝者如斯阅读(385) 评论(0) 推荐(0) 编辑

2019年5月22日

Linux学习笔记之rsync配置

摘要： 0x00 rsync 简介 Rsync（remote synchronize）是一个远程数据同步工具，可通过LAN/WAN快速同步多台主机间的文件，也可以使用 Rsync 同步本地硬盘中的不同目录。 Rsync 是用于取代rcp的一个工具，Rsync使用所谓的 “Rsync 算法” 来使本地和远程两阅读全文

posted @ 2019-05-22 15:55 时光飞逝，逝者如斯阅读(3666) 评论(0) 推荐(0) 编辑

K8S学习笔记之Pod的Volume emptyDir和hostPath

摘要： 0x00 Volume的类型 Volume是Kubernetes Pod中多个容器访问的共享目录。 Volume被定义在Pod上，被这个Pod里的多个容器挂在到相同或不同的路径下。 Volume的生命周期与Pod的生命周期相同，Pod内的容器停止和重启时不会影响Volume中的数据。 Kuberne 阅读全文

posted @ 2019-05-22 15:46 时光飞逝，逝者如斯阅读(862) 评论(0) 推荐(0) 编辑

ELK学习笔记之Kibana安装配置

摘要： Kibana 是一个开源的分析和可视化平台，是ELK的重要部分。Kibana提供搜索、查看和与存储在 Elasticsearch 索引中的数据进行交互的功能。开发者或运维人员可以轻松地执行高级数据分析，并在各种图表、表格和地图中可视化数据。系统：CentOS7.2 官网地址：https://www 阅读全文

posted @ 2019-05-22 10:55 时光飞逝，逝者如斯阅读(347) 评论(0) 推荐(0) 编辑

Prometheus监控学习笔记之Grafana用户权限分组

摘要： Grafana有账户分权和管理功能，不过和一般的账户分权管理操作不一样。Grafana通过admin账户建立organization，在不通的org内配置数据源和用户，用户隶属于不通的org，只能看到该org内的数据展示。在org内在进行用户操作权限的配置即可。 Grafana中通过设置不同的组织阅读全文

posted @ 2019-05-22 10:55 时光飞逝，逝者如斯阅读(2715) 评论(0) 推荐(0) 编辑

2019年5月17日

ELK学习笔记之logstash的各个场景应用（配置文件均已实践过）

摘要：详细请参考该文 https://www.cnblogs.com/qingqing74647464/p/9378385.html 阅读全文

posted @ 2019-05-17 10:19 时光飞逝，逝者如斯阅读(266) 评论(0) 推荐(0) 编辑

ELK学习笔记之配置logstash消费kafka多个topic并分别生成索引

摘要： 0x00 filebeat配置多个topic 0x01 查看是否输出到kafka 0x02 配置logstash集群 0x03 Es查看是否创建索引 0x04 logstash集群配置阅读全文

posted @ 2019-05-17 10:19 时光飞逝，逝者如斯阅读(6549) 评论(0) 推荐(0) 编辑

ELK学习笔记之Logstash不停机自动重载配置文件

摘要： 0x00 自动重新加载配置为了可以自动检测配置文件的变动和自动重新加载配置文件,需要在启动的时候使用以下命令: 默认检测配置文件的间隔时间是3秒,可以通过以下命令改变如果已经运行了没有提供自动重启的logstash,可以发送一个挂起命令给logstash重新加载配置文件: 0x01 配置文件自动阅读全文

posted @ 2019-05-17 10:19 时光飞逝，逝者如斯阅读(1386) 评论(0) 推荐(0) 编辑

ELK学习笔记之logstash将配置写在多个文件

摘要： 0x00 概述我们用Logsatsh写配置文件的时候，如果读取的文件太多，匹配的正则过多，会使配置文件动辄成百上千行代码，可能会造成阅读和修改困难。这时候，我们可以将配置文件的输入、过滤、输出分别放在不同的配置文件里，甚至把输入、过滤、输出再次分离，放在不同的文件里。这时候，后期再需要增删改查内阅读全文

posted @ 2019-05-17 10:18 时光飞逝，逝者如斯阅读(1596) 评论(1) 推荐(0) 编辑

ELK学习笔记之logstash配置多入多出并互相隔离

摘要： 0x00 概述需求：需要利用同一logstash进程采集不同日志，输出到es的不同index，各输入输出隔离；主要需要解决如下两个问题： 0x01 如何加载多个配置文件普通启动方式：多配置文件启动方式：注意：java-conf为目录，将加载该目录下所有配置文件；不要使用config/jav 阅读全文

posted @ 2019-05-17 10:18 时光飞逝，逝者如斯阅读(862) 评论(0) 推荐(0) 编辑

2019年5月15日

Linux学习笔记之tail命令显示最后n行

摘要： tail :输出文件的最后几行。用于linux查看日志的时候很方便，假如日志文件为：Console.log用法：1. tail Console.log 2. tail -f Console.log 3. tail -nf Console.log --n为最后n行 4. tail -n 10 fil 阅读全文

posted @ 2019-05-15 14:31 时光飞逝，逝者如斯阅读(14751) 评论(0) 推荐(0) 编辑

ELK学习笔记之使用curl命令操作elasticsearch

摘要： 0x00 _cat系列 _cat系列提供了一系列查询elasticsearch集群状态的接口。你可以通过执行curl -XGET localhost:9200/_cat 1. 获取所有_cat系列的操作你也可以后面加一个v，让输出内容表格显示表头，举例 0x01 _cluster系列 1、查询设置阅读全文

posted @ 2019-05-15 14:26 时光飞逝，逝者如斯阅读(1081) 评论(0) 推荐(0) 编辑

2019年5月6日

VMware学习笔记之在虚拟机中使用Ghost系统盘安装xp黑屏卡在光标闪无法进入系统

摘要：使用ghost安装后，无法进入系统，卡在光标闪动，请参考如下： https://www.cnblogs.com/mq0036/p/3588058.html https://wenku.baidu.com/view/273e78d080eb6294dd886c2a.html 主要是PM分区后，还是进行阅读全文

posted @ 2019-05-06 16:10 时光飞逝，逝者如斯阅读(543) 评论(0) 推荐(0) 编辑

2019年4月29日

硬件笔记之MacMini开启HiDPI

摘要： 0x00 概述先科普一下，有关retina和HiDPI那点事，Macmini在2k显示器的显示太小了，看起来费眼，没办法，苹果原生HiDPI是支持4k显示器的，所以以后买显示器，直接买4k的一步到位。目前手上的显示器是dell 2418D，分辨率为2560x1440，计划开启HiDPI 192 阅读全文

posted @ 2019-04-29 15:50 时光飞逝，逝者如斯阅读(5046) 评论(0) 推荐(0) 编辑

2019年4月25日

Prometheus监控学习笔记之Prometheus从1.x升级到2.x

摘要：详细参考这篇文章 https://cloud.tencent.com/developer/article/1171434 prometheus 2.0于2017-11-08发布，主要是存储引擎进行了优化。详细发布日志：https://prometheus.io/blog/2017/11/08/an 阅读全文

posted @ 2019-04-25 18:43 时光飞逝，逝者如斯阅读(848) 评论(0) 推荐(0) 编辑

Prometheus监控学习笔记之Prometheus 2.0 告警规则介绍

摘要： 0x00 变化 Prometheus 2.0 已经发布一段时间了，从今天开始我将分几篇文章为大家介绍其中的一些变化。此篇文章主要介绍 2.0 的告警规则声明的新写法。从 1.x 到 2.0 规则声明由自定义的 DSL 语法变成了标准的 yaml。这么做的主要原因是 yaml 能够提供更丰富的配阅读全文

posted @ 2019-04-25 18:31 时光飞逝，逝者如斯阅读(415) 评论(0) 推荐(0) 编辑

Prometheus监控学习笔记之Prometheus的Relabel，SD以及Federation功能

摘要： 0x00 k8s 的监控设计 k8s 默认以及推荐的监控体系是它自己的一套东西：Heapster + cAdvisor + Influxdb + Grafana，具体可以看这里。包括 k8s 自身的 HPA (Horizontal Pod Autoscaler)，默认从 Heapster 中获阅读全文

posted @ 2019-04-25 14:05 时光飞逝，逝者如斯阅读(1024) 评论(0) 推荐(0) 编辑

2019年4月17日

ELK学习笔记之logstash安装logstash-filter-multiline(在线离线安装)

摘要： 0x00 概述 ELK-logstash在搬运日志的时候会出现多行日志，普通的搬运会造成保存到ES中单条单条，很丑，而且不方便读取，logstash-filter-multiline可以解决该问题 github地址：https://github.com/logstash-plugins/logsta 阅读全文

posted @ 2019-04-17 20:31 时光飞逝，逝者如斯阅读(908) 评论(0) 推荐(0) 编辑

Ruby学习笔记之升级ruby的版本

摘要：升级ruby版本，有时候安装ruby的版本过低，需要进行升级，例如安装在centos6.7安装fpm需要ruby版本在1.9以上。 0x00 主机环境如下 0x01 使用yum安装ruby 0x02 查看ruby的版本 0x03 升级ruby1.9.3版本 1）删除原来的rubygems仓库 2）添阅读全文

posted @ 2019-04-17 20:13 时光飞逝，逝者如斯阅读(1627) 评论(0) 推荐(0) 编辑

ELK学习笔记之kibana关闭和进程查找

摘要：启动kibana ： nohup ./kibana & 查看启动日志： tail -f nohup kibana 使用 ps -ef|grep kibana 是查不到进程的，主要原因大概是因为 kibana 是node 写的。所以kibana 运行的时候是运行在node 里面。所以可以使用 p 阅读全文

posted @ 2019-04-17 19:53 时光飞逝，逝者如斯阅读(1066) 评论(0) 推荐(0) 编辑

Linux学习笔记之Linux添加/删除用户和用户组

摘要：本文总结了Linux添加或者删除用户和用户组时常用的一些命令和参数。 1、建用户： 2、建工作组 3、新建用户同时增加工作组注：：-g 所属组 -d 家目录 -s 所用的SHELL 4、给已有的用户增加工作组如果添加了用户，添加了组，然后使这个组里的人都可以sudo 到公共账号下可以/etc/ 阅读全文

posted @ 2019-04-17 19:51 时光飞逝，逝者如斯阅读(452) 评论(0) 推荐(0) 编辑

ELK学习笔记之ELK博客推介

摘要： http://wangnan.tech/all-categories/#posts-list-ELKstack 阅读全文

posted @ 2019-04-17 19:13 时光飞逝，逝者如斯阅读(242) 评论(0) 推荐(0) 编辑

ELK学习笔记之ELK搜集OpenStack节点日志

摘要：模板来自网络，模板请不要直接复制，先放到notepad++内调整好格式，注意缩进部署架构控制节点作为日志服务器，存储所有 OpenStack 及其相关日志。Logstash 部署于所有节点，收集本节点下所需收集的日志，然后以网络(node/http)方式输送给控制节点的 Elasticsearc 阅读全文

posted @ 2019-04-17 18:57 时光飞逝，逝者如斯阅读(597) 评论(0) 推荐(0) 编辑

Linux学习笔记之时间同步the NTP socket is in use, exiting问题

摘要： [root@app1 ~]# ntpdate ntp.api.bz 17 Apr 14:39:09 ntpdate[24744]: the NTP socket is in use, exiting [root@app1 ~]# service ntpd stop Shutting down ntpd: [ OK ... 阅读全文

posted @ 2019-04-17 18:09 时光飞逝，逝者如斯阅读(950) 评论(0) 推荐(0) 编辑

2019年4月11日

Python关键点笔记之使用 pyenv 管理多个 Python 版本依赖环境

摘要： 0x00 背景从接触Python以来，一直都是采用virtualenv和virtualenvwrapper来管理不同项目的依赖环境，通过workon、mkvirtualenv等命令进行虚拟环境切换，很是愉快。然而，最近想让项目能兼容更多的Python版本，例如至少同时兼容Python2.7和Py 阅读全文

posted @ 2019-04-11 10:17 时光飞逝，逝者如斯阅读(378) 评论(0) 推荐(0) 编辑

2019年3月28日

K8S学习笔记之二进制部署Kubernetes v1.13.4 高可用集群

摘要： 0x00 概述本次采用二进制文件方式部署,本文过程写成了更详细更多可选方案的ansible部署方案 https://github.com/zhangguanzhang/Kubernetes-ansible和之前的步骤差不多都是和kubeadm步骤一样,不过这次所有kubelet全部走bootstr 阅读全文

posted @ 2019-03-28 11:01 时光飞逝，逝者如斯阅读(3012) 评论(2) 推荐(1) 编辑

2019年3月26日

K8S学习笔记之ETCD启动失败注意事项

摘要：最近搭建K8S集群遇到ETCD的报错，报错信息如下，一定要关闭防火墙、iptables和SELINUX，三个都要关闭！！关闭CentOS7防火墙关闭SELINUX 清除和关闭iptables 阅读全文

posted @ 2019-03-26 21:06 时光飞逝，逝者如斯阅读(3336) 评论(0) 推荐(0) 编辑

K8S学习笔记之kubernetes 日志架构

摘要： 0x00 概述应用程序和系统日志可以帮助我们了解集群内部的运行情况，日志对于我们调试问题和监视集群情况也是非常有用的。而且大部分的应用都会有日志记录，对于传统的应用大部分都会写入到本地的日志文件之中。对于容器化应用程序来说则更简单，只需要将日志信息写入到 stdout 和 stderr 即可，容器阅读全文

posted @ 2019-03-26 15:14 时光飞逝，逝者如斯阅读(557) 评论(0) 推荐(0) 编辑

K8S学习笔记之k8s日志收集实战

摘要： 0x00 简介本文主要介绍在k8s中收集应用的日志方案，应用运行中日志，一般情况下都需要收集存储到一个集中的日志管理系统中，可以方便对日志进行分析统计，监控，甚至用于机器学习，智能分析应用系统问题，及时修复应用所存在的问题。在k8s集群中应用一般有如下日志输出方式直接遵循docker官方建议把阅读全文

posted @ 2019-03-26 14:53 时光飞逝，逝者如斯阅读(979) 评论(0) 推荐(0) 编辑

公告