Shell脚本:while read line无法读取最后一行的问题

【1】Shell脚本:while read line无法读取最后一行的问题

刚刚利用shell脚本处理日志文件时,发现了一个问题:while read line无法读取到最后一行

通过编辑器可以看到待处理的文件是5243行,但是,脚本的计数值却只打印了5242次。

shell脚本源码如下:

复制代码
1 icount=0
2 while read line
3 do 
4   data=`echo ${line#*error repeat sdr }`
5   callid=`echo ${data% error:mysql.*}`
6   let icount++
7   echo "${icount}"
8   echo "${callid}" >> 2019-02-26-callid-test.txt
9 done < 2019-02-26-errorrepeat.txt
复制代码

如上脚本。

【2】解决方案

方案一:

在利用while read line读取文件时:

如果文件最后一行之后没有换行符\n,则read读取最后一行时遇到文件结束符EOF,循环即终止。

虽然,此时$line内存有最后一行,但程序已经没有机会再处理此行内容。因此导致了这个问题发生。解决方案如下:

1 while read line || [[ -n ${line} ]]

这样当文件没有到最后一行时不会测试-n $line,当遇到文件结束(最后一行)时,仍然可以通过测试$line是否有内容来进行继续处理。

上例子代码如下改进:

复制代码
1 icount=0
2 while read line || [[ -n ${line} ]]
3 do
4   data=`echo ${line#*error repeat sdr }`
5   callid=`echo ${data% error:mysql.*}`
6   let icount++
7   echo "${icount}"
8   echo "${callid}" >> 2019-02-26-callid-test.txt
9 done < 2019-02-26-errorrepeat.txt
复制代码

方案二:

通过分析原因可知,本质原因是因为文件格式不是unix导致的,也可以直接通过设置文件格式来处理。

如这样处理,脚本代码不需改动。

查询文件格式和修改文件格式为unix,可参见随笔《/usr/bin/python^M: 解释器错误: 没有那个文件或目录

 

Good Good Study, Day Day Up.

顺序 选择 循环 总结

posted @   kaizenly  阅读(9054)  评论(0编辑  收藏  举报
编辑推荐:
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 基于Microsoft.Extensions.AI核心库实现RAG应用
· Linux系列:如何用heaptrack跟踪.NET程序的非托管内存泄露
· 开发者必知的日志记录最佳实践
阅读排行:
· TypeScript + Deepseek 打造卜卦网站:技术与玄学的结合
· Manus的开源复刻OpenManus初探
· AI 智能体引爆开源社区「GitHub 热点速览」
· C#/.NET/.NET Core技术前沿周刊 | 第 29 期(2025年3.1-3.9)
· 从HTTP原因短语缺失研究HTTP/2和HTTP/3的设计差异
历史上的今天:
2014-03-21 强制类型转换(const_cast)
打赏

喜欢请打赏

扫描二维码打赏

微信打赏

点击右上角即可分享
微信分享提示