随笔分类 - 日志管理
摘要:阿里云Ingress除了提供外部可访问的 URL、负载均衡、SSL、基于名称的虚拟主机外,还支持将所有用户的HTTP请求日志记录到标准输出中。同时Ingress访问日志与阿里云日志服务打通,您可以使用日志服务快速创建日志分析和监控大盘。 前提条件 集群创建时,默认会安装日志组件,如未安装,请参考 使
阅读全文
摘要:日志收集流程 对于日志收集的客户端,其work pipeline通常包括三个过程:Input,Process,Output。 Input: 适配各类日志接入源,目前Logtail支持文本文件、Syslog(TCP流式)两种形式数据写入。 Process:自定义日志处理逻辑,常见的有:日志切分、日志编
阅读全文
摘要:阿里云容器服务Kubernetes集群集成了日志服务(SLS),您可在创建集群时启用日志服务,快速采集Kubernetes 集群的容器日志,包括容器的标准输出以及容器内的文本文件。 新建 Kubernetes 集群 如果您尚未创建任何的 Kubernetes 集群,可以按照本节的步骤来进行操作: 选
阅读全文
摘要:自建k8s集群 的master 节点安装 logtail 采集工具 k8s******ss:{your-project-suffix} cn*****ou: {region-id} 12******50: {aliuid} LT******8G: {access-key-id} 子账号 有阿里云日志
阅读全文
摘要:以机器 gpu-server-011 为例: 机房机器添加AliUids操作 安装logtail 日志采集工具 进入阿里云的日志服务- project - logstore 点击 logtail 机器组 – 创建机器组 创建机器组信息: 机器组名称:gpu-server011 , ip 地址: 17
阅读全文
摘要:问题描述: 阿里云k8s应用日志之前一直都是可以正常的采集, 先出现一问题, 通过kibana 和阿里云的日志服务都没法展示最新的k8s应用的日志, 部分应用的最新日志有被采集到,但大部分应用日志没有做采集到。
阅读全文
摘要:日志服务支持通过Logtail采集Kubernetes集群日志,并支持CRD(CustomResourceDefinition)进行采集配置管理。本文主要介绍如何安装并使用Logtail采集Kubernetes集群日志。 采集流程 安装alibaba-log-controller Helm包。 创建
阅读全文
摘要:自建Kubernetes安装方式 前提条件 Kubernetes集群版本1.8及以上。 已经安装Helm命令,版本2.6.4及以上。 安装步骤 在日志服务控制台创建一个Project,Project名称以k8s-log-custom-开头。 将下述命令中的参数替换,并执行此命令。 试用 wget h
阅读全文
摘要:Logtail客户端是日志服务提供的日志采集客户端,请参考本文档,在Linux服务器上安装Logtail客户端。 支持的系统 支持如下版本的Linux x86-64(64位)服务器: Aliyun Linux Ubuntu Debian CentOS OpenSUSE RedHat 前提条件 已拥有
阅读全文
摘要:Configure AliUids for ECS servers under other Alibaba Cloud accounts or on-premises IDCs If Logtail is installed on ECS servers under other Alibaba Cl
阅读全文
摘要:当日志采集发生异常时,您可以通过Logtail自助检测工具查看客户端是否存在异常情况,根据工具提示快速定位并解决问题。 说明 本工具目前仅支持Linux系统的服务器。 说明 本工具目前仅支持Linux系统的服务器。 说明 本工具目前仅支持Linux系统的服务器。 准备工作 下载检测工具脚本。 试用
阅读全文
摘要:日志服务支持通过数据接入向导配置采集Nginx日志,并自动创建索引和Nginx日志仪表盘,帮助您快速采集并分析Nginx日志。 许多个人站长选取了Nginx作为服务器搭建网站,在对网站访问情况进行分析时,需要对Nginx访问日志统计分析,从中获取网站的访问量、访问时段等访问情况。传统模式下利用CNZ
阅读全文
摘要:并加入开机启动 : 邮件配置参考: https://www.cnblogs.com/weifeng1463/p/7508485.html
阅读全文
摘要:#!/bin/bash /bin/find /data/logs/nginx/ -name "*.log*" -mtime +4 -type f -print0 |xargs -0 mv -t /mnt/logs/nginx/ /bin/find /data/logs/uwsgi/ -name "*
阅读全文
摘要:在生产环境下,如果不修改elasticsearch节点的角色信息,在高数据量,高并发的场景下集群容易出现脑裂等问题。 默认情况下,elasticsearch集群中每个节点都有成为主节点的资格,也都存储数据,还可以提供查询服务。这些功能是由两个属性控制的。node.master和node.data默认
阅读全文
摘要:何为Logrotate? Logrotate是一个实用的日志管理工具,旨在简化对系统上生成大量的日志文件进行管理。 Logrotate允许自动旋转压缩,删除和邮寄日志文件,从而节省宝贵的磁盘空间。 Logrotate可以设置为每天、每周、每月或当日志文件达到一定的大小时处理日志文件。还可以完全控制日
阅读全文
摘要:本来直接用crontab -e 就可以打开vim,输入要执行的任务保存退出就可以添加任务直接启动运行了。但是今天组长说能不能写个shell不用打开vi就能添加到crontab的。 最先想到的是怎么在shell脚本里面如何使用vi的命令,网上找了好多,要么格式太乱,要么没明白意思直接告诉vi的使用方法
阅读全文