随笔分类 -  logstash

高效日志管理:通过 Systemd Journal 收集日志的终极指南
摘要:随着 systemd 成了主流的 init 系统,systemd 的功能也在不断的增加,比如对系统日志的管理。Systemd 设计的日志系统好处多多,这里笔者就不再赘述了,本文笔者主要介绍 systemd journal 收集日志的三种方式: 程序使用 libc 库中的 syslog() 函数输出的 阅读全文

posted @ 2024-05-30 16:23 我和你并没有不同 阅读(219) 评论(0) 推荐(0) 编辑

扔掉 ELK!来试试这套我司使用 5 年多的 Nginx 日志解决方案,转载
摘要:原文:https://cloud.tencent.com/developer/article/2115373 最近客户有个新需求,就是想查看网站的访问情况,由于网站没有做google的统计和百度的统计,所以访问情况,只能通过日志查看,通过脚本的形式给客户导出也不太实际,给客户写个简单的页面,咱也做不 阅读全文

posted @ 2023-08-21 11:45 我和你并没有不同 阅读(13) 评论(0) 推荐(0) 编辑

mongo input 插件安装
该文被密码保护。

posted @ 2017-11-30 13:44 我和你并没有不同 阅读(0) 评论(0) 推荐(0) 编辑

mongodb2udp udp2kafka:可以通过环境变量设置配置文件,通过环境变量配置的环境变量若变化了,只能通过重启容器才行
该文被密码保护。

posted @ 2017-11-30 13:23 我和你并没有不同 阅读(2) 评论(0) 推荐(0) 编辑

kafka2udp & udp2kafka
该文被密码保护。

posted @ 2017-11-25 09:44 我和你并没有不同 阅读(1) 评论(0) 推荐(0) 编辑

修改logstash的docker-entrypoint,实现配置文件的动态生成
该文被密码保护。

posted @ 2017-11-23 16:14 我和你并没有不同 阅读(0) 评论(0) 推荐(0) 编辑

搭建自己的镜像仓库
该文被密码保护。

posted @ 2017-10-27 17:48 我和你并没有不同 阅读(23) 评论(0) 推荐(0) 编辑

logstash自己的日志保存到文件中:log4j2.properties
摘要:效果图:到了50M就压缩,压缩到了5M多,最多保留5个压缩包,再有就丢弃旧的压缩包 0)查看当前logstash安装了哪些插件 ./logstash-plugin list 1)若logstash没有权限访问某个文件,需要给logstash加到文件所属组或修改文件权限,下面举个修改logstash所 阅读全文

posted @ 2017-10-19 15:28 我和你并没有不同 阅读(13299) 评论(0) 推荐(0) 编辑

Docker处理日志的方法&日志收集工具比较
摘要:测试logstash:docker run -it mylogstash:0.1.0 logstash -e 'input{stdin{}}output{stdout{codec=>rubydebug}}' http://www.jianshu.com/p/8384f6cd0f22 https:// 阅读全文

posted @ 2017-10-12 10:44 我和你并没有不同 阅读(817) 评论(0) 推荐(0) 编辑

logstash作为syslog服务器,收集容器中的日志
该文被密码保护。

posted @ 2017-09-26 14:11 我和你并没有不同 阅读(11) 评论(0) 推荐(0) 编辑

logstash 数据插入mongodb,去掉元数据,若删除@timestamp,插入数据会报错
该文被密码保护。

posted @ 2017-09-24 14:50 我和你并没有不同 阅读(9) 评论(0) 推荐(0) 编辑

利用logstash收集docker容器中的日志到kafka
该文被密码保护。

posted @ 2017-09-16 10:59 我和你并没有不同 阅读(11) 评论(0) 推荐(0) 编辑