linux 统计某个时段ip访问次数最多的
linux下使用awk命令按时间段筛选日志
zcat com.log20160529.gz | grep 'dianping_reply'| awk '{split($4,array,"[");if(array[2]>="29/May/2016:00:00:26" && array[2]<="29/May/2016:00:01:14"){print $0}}'
解释:扫描gz压缩文件,从中寻找带有`dianping_reply`的行,将改行按照`[`进行拆分,然后直接使用if条件进行判断,比较,最终输出想要的结果。
命令解析:
zcat 直接读取压缩文件的内容
grep用来过滤特定字符的行
awk 用来执行命令
split用来切分字符串
统计某段时间访问量最多的10个ip地址:
cat jie.jisujie.com.20200516.log|awk '{split($4,array,"]");if(array[1]>="14:13:55" && array[1]<="21:53:55"){print $0}}'|awk '{print $1}'|sort |uniq -c|sort -n|tail -10
查询耗时大于3秒的响应:cat $log|grep 响应|awk '{split($8, arr,":");if((arr[2]+0)>3)print $8}'
查询耗时大于3秒的接口调用次数:
cat $log|grep 响应|awk '{split($8, arr,":");if((arr[2]+0)>3){split($6,funcarr,"-");print funcarr[1]}}'|sort|uniq -c |sort -nr
其他写法参考如下(不是统计上面的日志):
cat 接口日志文件|sed 's/ms,//g' |awk '{ if (substr($8,9) -100 >0 ) print}'|awk '{print $9}'|sort|uniq -c|sort -nr|head
按照日期过滤查找:
awk -F - '"2012.12.06 01:56:01" < $1 && $1 <= "2012.12.08 04:30:00"' server.log*
awk '"16:52:50" < $4' log-m-all-2020-08-21.php|grep 117.136.62.176|awk '{print $4}'
awk '"16:47:50" < $4 && $4<="16:49:07"' log-m-all-2020-08-21.php|grep 117.136.62.176|awk '{print $4}'
posted on 2020-05-17 10:25 andydaopeng 阅读(2556) 评论(0) 编辑 收藏 举报
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】凌霞软件回馈社区,博客园 & 1Panel & Halo 联合会员上线
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】博客园社区专享云产品让利特惠,阿里云新客6.5折上折
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 一个奇形怪状的面试题:Bean中的CHM要不要加volatile?
· [.NET]调用本地 Deepseek 模型
· 一个费力不讨好的项目,让我损失了近一半的绩效!
· .NET Core 托管堆内存泄露/CPU异常的常见思路
· PostgreSQL 和 SQL Server 在统计信息维护中的关键差异
· DeepSeek “源神”启动!「GitHub 热点速览」
· 微软正式发布.NET 10 Preview 1:开启下一代开发框架新篇章
· C# 集成 DeepSeek 模型实现 AI 私有化(本地部署与 API 调用教程)
· DeepSeek R1 简明指南:架构、训练、本地部署及硬件要求
· 2 本地部署DeepSeek模型构建本地知识库+联网搜索详细步骤