解决python执行linux查看文件命令后，因为^@特殊符号导致部分内容不显示的问题

问题现象

文件a的内容如下：

查看第3行到第5行的内容：sed -n '3,5p' /tmp/test/a

可见在命令行执行，是没有问题的。

 

在python中使用paramiko模块执行linux命令，主要代码如下：

    def toServer(self, str):
        sys.setdefaultencoding('utf-8')
        return str.decode('utf-8').encode('GB18030')

    def fromServer(self, str):
        sys.setdefaultencoding('GB18030')
        return str.decode('GB18030')

    def executeCmd(self, cmd, isErr=False):
        cmd = self.toServer(cmd)
        print 'exec_command:%s' % cmd
        stdin, stdout, stderr = self.ssh.exec_command(cmd)
        out = stdout.read()
        out = self.fromServer(out)
        out = out[:len(out) - 1]
        if isErr == True:
            err = stderr.read()
            err = self.fromServer(err)
            err = err[:len(err) - 1]
            return out, err
        else:
            return out

执行：

print sa.executeCmd('''sed -n '3,5p' /tmp/test/a''')

输出：

可见，输出第2行时（文件的第3行）是空的！

 

分析

打断点

查看out完整的值：

可以看到“Selena Gomez:”这一行其实是已经获取到了，但是可以看到前面有空格和空行，不禁让人怀疑这中间是否包含什么特殊的字符。

使用vi查看a文件的内容：发现里面包含了大量的^@字符！

^@是一个特殊字符，通过ctrl+V  ctrl+@可以敲出来。

 

在实际使用中，是检查日志的时候发现的这个问题。这里只是用歌词代替日志。

首先备份日志：cat log >> log.bak

然后清空日志：echo "" > log

之后再让程序写入日志（log文件），然后再去检查这个日志文件。

发现程序每次写入日志时，前面会有大量的^@字符。原因有可能是程序写入日志的代码有问题。

 

解决

在vi末行模式下输入：冒号%s/^@//g

注意：是通过ctrl+V  ctrl+@敲出来。

这是目前为止我所知道的从文件上把字符去掉，但是如果是做成自动化去获取日志，手动去操作就不现实了。

 

目前的解决办法是：传入一个字符串，并查找这个字符串的位置，然后从这个位置开始截取

    def executeCmd(self, cmd, isErr=False, initial='nope'):
        cmd = self.toServer(cmd)
        print 'exec_command:%s' % cmd
        stdin, stdout, stderr = self.ssh.exec_command(cmd)
        out = stdout.read()
        out = self.fromServer(out)
        if initial != 'nope':
            # 截取正文，过滤特殊字符^@
            startPosition = out.find(initial)
            out = out[startPosition:len(out) - 1]
        else:
            out = out[:len(out) - 1]
        if isErr == True:
            err = stderr.read()
            err = self.fromServer(err)
            err = err[:len(err) - 1]
            return out, err
        else:
            return out

执行：

print sa.executeCmd('''sed -n '3,5p' /tmp/test/a''',initial='Selena')

输出：

因为实际使用过程中，每次去获取日志都是最新的日志（经过了备份和清空），所以包含^@符号只有一段，而且是在第一行内容的前面，所以这种方法适用。

如果要获取的日志包含多段^@符号，就不适用。

如果你有更好的方法，欢迎分享。