Shell脚本:while read line无法读取最后一行的问题
【1】Shell脚本:while read line无法读取最后一行的问题
刚刚利用shell脚本处理日志文件时,发现了一个问题:while read line无法读取到最后一行
通过编辑器可以看到待处理的文件是5243行,但是,脚本的计数值却只打印了5242次。
shell脚本源码如下:
1 icount=0 2 while read line 3 do 4 data=`echo ${line#*error repeat sdr }` 5 callid=`echo ${data% error:mysql.*}` 6 let icount++ 7 echo "${icount}" 8 echo "${callid}" >> 2019-02-26-callid-test.txt 9 done < 2019-02-26-errorrepeat.txt
如上脚本。
【2】解决方案
方案一:
在利用while read line读取文件时:
如果文件最后一行之后没有换行符\n,则read读取最后一行时遇到文件结束符EOF,循环即终止。
虽然,此时$line内存有最后一行,但程序已经没有机会再处理此行内容。因此导致了这个问题发生。解决方案如下:
1 while read line || [[ -n ${line} ]]
这样当文件没有到最后一行时不会测试-n $line,当遇到文件结束(最后一行)时,仍然可以通过测试$line是否有内容来进行继续处理。
上例子代码如下改进:
1 icount=0 2 while read line || [[ -n ${line} ]] 3 do 4 data=`echo ${line#*error repeat sdr }` 5 callid=`echo ${data% error:mysql.*}` 6 let icount++ 7 echo "${icount}" 8 echo "${callid}" >> 2019-02-26-callid-test.txt 9 done < 2019-02-26-errorrepeat.txt
方案二:
通过分析原因可知,本质原因是因为文件格式不是unix导致的,也可以直接通过设置文件格式来处理。
如这样处理,脚本代码不需改动。
查询文件格式和修改文件格式为unix,可参见随笔《/usr/bin/python^M: 解释器错误: 没有那个文件或目录》
Good Good Study, Day Day Up.
顺序 选择 循环 总结
分类:
[07]【Linux】
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 基于Microsoft.Extensions.AI核心库实现RAG应用
· Linux系列:如何用heaptrack跟踪.NET程序的非托管内存泄露
· 开发者必知的日志记录最佳实践
· TypeScript + Deepseek 打造卜卦网站:技术与玄学的结合
· Manus的开源复刻OpenManus初探
· AI 智能体引爆开源社区「GitHub 热点速览」
· C#/.NET/.NET Core技术前沿周刊 | 第 29 期(2025年3.1-3.9)
· 从HTTP原因短语缺失研究HTTP/2和HTTP/3的设计差异
2014-03-21 强制类型转换(const_cast)