linux 配置文件.conf 非打印字符出错的研究（二）

如何清除呢？ 如果你的配置文件中，不使用汉字，可以用一个命令搞定：

 tr -c '\r\n\t[:print:]'   ' ' < /usr/local/apache/conf/httpd.conf > /tmp/newhttpd.conf   

第一字符集，包括了换行、回车、制表符、可打印字符，这些需要保护，其它的，全换成空格了

 tr  (选项)  (参数)

选项
-c或——complerment：取代所有不属于第一字符集的字符；
-d或——delete：删除所有属于第一字符集的字符；
-s或--squeeze-repeats：把连续重复的字符以单独一个字符表示；
-t或--truncate-set1：先删除第一字符集较第二字符集多出的字符。


参数
•字符集1：指定要转换或删除的原字符集。当执行转换操作时，必须使用参数“字符集2”指定转换的目标字符集。但执行删除操作时，不需要参数“字符集2”；
•字符集2：指定要转换成的目标字符集。

例子，将制表符替换成空格： cat filename | tr '\t' ' '  

 

如果希望能保留中文注解，需要一些复杂的代码，考虑到linux bash shell 脚本 晦涩又长的丑，决定用优雅的python来写。下列代码就是清除.conf文件中非打印字符，但注解部分不处理，用法如下：

 python scanconf.py -c /usr/local/apache/conf/httpd.conf  

 代码如下 ：

#!/usr/bin/env python
# -*- coding: utf-8 -*-
"""
__title__ = '扫描并清除linux配置文件 .conf 中的非打印字符(#注解后面的除外)'
__author__ = 'shen.bas'
__date__ = '2017/12/3'
# python scanconf.py -s /usr/local/apache/conf/httpd.conf
"""
import os, sys
import platform
from io import open
import string

class Scaner(object):

    def __init__(self,conf_filepath):
        self.conf_file = conf_filepath

    def scan(self,is_clean):
        with open(self.conf_file, "rt", encoding="utf-8") as f:#linux default format
            newlines = ''
            lines = f.readlines()
            line_no = 1
            for line in lines:
                sp = line.split('#')
                conf_str = sp[0]
                memo_str =''
                for s in  sp[1:]:
                    memo_str += '#' + s  #有多少都串联起来
                conf_filter_list = filter(lambda x:x in string.printable,list(conf_str))
                conf_filter_str = ''.join(conf_filter_list)  # list to str
                newline = conf_filter_str + memo_str
                newlines += newline + '\n'
                if len(line) != len(newline): #说明过滤掉了些垃圾
                    print('err_row %d: %s'%(line_no,line))
                line_no = line_no+1

        if is_clean:
            with open(self.conf_file, "wt", encoding="utf-8") as f:
                f.write(newlines)


def check_argv_ok():
    if len(sys.argv) < 3:
        print('\nscanconf [options] conf_file_name\n\n\t-s : only scan for error.\n\t-c : scan and clean error.\n')
        return  False
    else:
        return True

def check_platform_ok():
    my_os = platform.platform()
    if (my_os.find('Linux') > -1):
        return True
    else:
        print('run only for linux')
        return  False

if __name__ == '__main__':
    if check_platform_ok() and check_argv_ok():
        s = Scaner(sys.argv[2])
        if sys.argv[1] == '-s':
            s.scan(False)
        elif sys.argv[1] == '-c':
            s.scan(True)
        else:
            print('\n[options] must be -s or -c\n')

 开始准备用cat -A 方式处理，所以限制在linux中运行，后来发现不是个简单主意，改成直接过滤了，因此也可以运行在windows平台，懒得动了，需要自己改改就行。