解决python执行linux查看文件命令后,因为^@特殊符号导致部分内容不显示的问题

时间:2022-10-18 09:17:27

问题现象

文件a的内容如下:

解决python执行linux查看文件命令后,因为^@特殊符号导致部分内容不显示的问题

查看第3行到第5行的内容:sed -n '3,5p' /tmp/test/a

解决python执行linux查看文件命令后,因为^@特殊符号导致部分内容不显示的问题

可见在命令行执行,是没有问题的。

在python中使用paramiko模块执行linux命令,主要代码如下:

    def toServer(self, str):
sys.setdefaultencoding('utf-8')
return str.decode('utf-8').encode('GB18030') def fromServer(self, str):
sys.setdefaultencoding('GB18030')
return str.decode('GB18030') def executeCmd(self, cmd, isErr=False):
cmd = self.toServer(cmd)
print 'exec_command:%s' % cmd
stdin, stdout, stderr = self.ssh.exec_command(cmd)
out = stdout.read()
out = self.fromServer(out)
out = out[:len(out) - 1]
if isErr == True:
err = stderr.read()
err = self.fromServer(err)
err = err[:len(err) - 1]
return out, err
else:
return out

执行:

print sa.executeCmd('''sed -n '3,5p' /tmp/test/a''')

输出:

解决python执行linux查看文件命令后,因为^@特殊符号导致部分内容不显示的问题

可见,输出第2行时(文件的第3行)是空的!

分析

打断点

解决python执行linux查看文件命令后,因为^@特殊符号导致部分内容不显示的问题

查看out完整的值:

解决python执行linux查看文件命令后,因为^@特殊符号导致部分内容不显示的问题

可以看到“Selena Gomez:”这一行其实是已经获取到了,但是可以看到前面有空格和空行,不禁让人怀疑这中间是否包含什么特殊的字符。

使用vi查看a文件的内容:发现里面包含了大量的^@字符!

解决python执行linux查看文件命令后,因为^@特殊符号导致部分内容不显示的问题

^@是一个特殊字符,通过ctrl+V  ctrl+@可以敲出来。

在实际使用中,是检查日志的时候发现的这个问题。这里只是用歌词代替日志。

首先备份日志:cat log >> log.bak

然后清空日志:echo "" > log

之后再让程序写入日志(log文件),然后再去检查这个日志文件。

发现程序每次写入日志时,前面会有大量的^@字符。原因有可能是程序写入日志的代码有问题。

解决

在vi末行模式下输入:冒号%s/^@//g

注意:是通过ctrl+V  ctrl+@敲出来。

这是目前为止我所知道的从文件上把字符去掉,但是如果是做成自动化去获取日志,手动去操作就不现实了。

目前的解决办法是:传入一个字符串,并查找这个字符串的位置,然后从这个位置开始截取

    def executeCmd(self, cmd, isErr=False, initial='nope'):
cmd = self.toServer(cmd)
print 'exec_command:%s' % cmd
stdin, stdout, stderr = self.ssh.exec_command(cmd)
out = stdout.read()
out = self.fromServer(out)
if initial != 'nope':
# 截取正文,过滤特殊字符^@
startPosition = out.find(initial)
out = out[startPosition:len(out) - 1]
else:
out = out[:len(out) - 1]
if isErr == True:
err = stderr.read()
err = self.fromServer(err)
err = err[:len(err) - 1]
return out, err
else:
return out

执行:

print sa.executeCmd('''sed -n '3,5p' /tmp/test/a''',initial='Selena')

输出:

解决python执行linux查看文件命令后,因为^@特殊符号导致部分内容不显示的问题

因为实际使用过程中,每次去获取日志都是最新的日志(经过了备份和清空),所以包含^@符号只有一段,而且是在第一行内容的前面,所以这种方法适用。

如果要获取的日志包含多段^@符号,就不适用。

如果你有更好的方法,欢迎分享。