Windows和Linux的不同换行符导致脚本执行异常

问题描述

有一个配置文件 config:

KAFKA_HOME=/home/wy/dev/kafka_2.13-2.6.0
BOOTSTRAP_SERVER=127.0.0.1:9092

另有一个使用该配置文件的脚本 list-topics.sh:

#!/bin/bash
. config

"$KAFKA_HOME"/bin/kafka-topics.sh --bootstrap-server "$BOOTSTRAP_SERVER" --list

我使用虚拟机Ubuntu挂载Windows分区,执行在Windows环境下编写的脚本,提示:

wy@ship:/mnt/hgfs/D/projects/kafka-mate/scripts$ ./list-topics.sh 
/bin/kafka-topics.sh: No such file or directory13-2.6.0

解决

找了好久的原因,最终注意到config文件的换行符编码为CRLF

三种换行符(line separator):

  • Windows:CRLF(\r\n)
  • Unix and macOSLinux:LF(\n)
  • CLassic Mac OS:CR(\r),少见

改为LF后,脚本运行正常。我用的IDEA,在右下角更改:

vim状态栏的[noeol] [dos]是什么意思?

当config的line separator问CRLF时,vim打开Windows分区上的文件时,状态栏显示[noeol][dos]

当config的line separator问LF时,vim打开Windows分区上的文件时,状态栏显示[noeol]

noeol:no end of line。

如果是Linux分区上的文件,且line separator为LF时,状态栏不会额外显示。

以下内容来自:Vim 编辑器底端 [noeol], [dos] 的含义 - Trekshot - 博客园 (cnblogs.com)

有时使用 Vim 打开一个文件会在窗口底部发现 [noeol], [dos] 提示信息:

"hello-dos.txt" [noeol][dos] 2L, 10C                          1,1           All

这两个符号有何含义?

直观上理解,'noeol' 就是 'no end-of-line', 即“没有行末结束符”, Linux 下的文本编辑器(如 Vim)会在每一行 (包括最后一行)末尾添加一个换行符。比如我们在 Debian 下新建一个名为 'hello-unix.txt' 的文本文件,内容如下:

Hello
Unix

那么,使用cat -A hello-unix.txt命令可以看到这些换行符:

ts@TS:~/www/document$ cat -A hello-unix.txt
Hello$
Unix$
ts@TS:~/www/document$

从中可以清楚地看到每行末尾的 '$' 字符,这就是 Linux 下的“行末结束符”。

下面我们再在 Windows 下创建一个名为 'hello-dos.txt' 记事本文件,内容如下:

Hello
DOS

在 Debian 下查看此文件的换行符信息:

ts@TS:~/www/document$ cat -A hello-dos.txt
Hello^M$
DOSts@TS:~/www/document$

同样是两行,每行一个单词,Windows 和 Linux 下的换行符有两个明显不同:

  1. Windows 下的换行符比 Linux 下的多了个 ^M
  2. 最后一行行末没有换行符;

这两个不同之处也正是 [dos], [noeol] 两个 Flag 信息出现的原因。 Windows 下文本文件每行的换行符为“回车+换行”(CRLF,^M$), 而 Linux 下则仅为 “换行” (LF, $). Vim 发现文本中含有 ^M$换行字符判定为 Windows 下创建的 文件,用 [dos] Flag 提示;Vim 没有在最后一行发现换行符,判定此文件不是在 Linux 下创建/编辑,用 [noeol] Flag 提示用户。

如何消除 [noeol] Flag?

只需在 Debian 下将该文件重新保存即可,还是上面的 hello-dos.txt 文件,打开它, 不做任何修改直接 :wq保存退出,再查看换行符:

ts@TS:~/www/document$ cat -A hello-dos.txt
Hello^M$
DOS^M$
ts@TS:~/www/document$

换行符已经追加上去,这里要注意的是追加的是 Windows 下的换行符(回车+换行) ^M$, 而不是 Linux 下的换行符(换行)$, 因为 Vim 已经发现此文件是在 Windows 下创建的([dos] Flag),尽管是在 Linux 下编辑,Vim 也会按照文件创建时所在的操作系统下的换行规则添加换行符。

如何消除 [dos] Flag?

有两种简单的方法:

  1. Linux 下提供有两个命令用来进行 Windows 和 Unix 文件的转化:dos2unix unix2dos;
  2. 在 Debian 下使用 touch template.txt 创建一个模板,在 Windows 下创建的任 何文本文件都以此模板为基础;

Reference

Vim 编辑器底端 [noeol], [dos] 的含义 - Trekshot - 博客园 (cnblogs.com)


本文同步发布于:

posted @ 2022-04-10 17:12  duanguyuan  阅读(369)  评论(0编辑  收藏  举报