文件内容差异对比

示例1：difflib模块——两个字符串的差异对比

　　通过使用difflib模块实现两个字符串的差异对比，然后以版本控制风格进行输出。

#!/usr/bin/evn python
# --*-- coding: utf-8 --*--
# Auther : Liu WeiDong
import difflib

text1 = '''test1:             #字符串1
This module provides classes.
including HTML and context.
difflib document7.4
add string
'''
text1_lines = text1.splitlines()   #以行进行分隔

text2 = '''test2:             #字符串2
This module provides classes.
including HTML and context.
difflib document7.5
'''

text2_lines = text2.splitlines()

d = difflib.Differ()         #创建Differ()对象

diff = d.compare(text1_lines,text2_lines)       采用compare方法对字符串进行比较
print('\n'.join(list(diff)))

　　可以将以上代码换行html格式，将如上脚本运行python diff.py > diff.html，在使用浏览器打开diff.html文件

#!/usr/bin/evn python
# --*-- coding: utf-8 --*--
# Auther : Liu WeiDong
import difflib

text1 = '''test1:             #字符串1
This module provides classes.
including HTML and context.
difflib document7.4
add string
'''
text1_lines = text1.splitlines()   #以行进行分隔

text2 = '''test2:             #字符串2
This module provides classes.
including HTML and context.
difflib document7.5
'''

text2_lines = text2.splitlines()

# d = difflib.Differ()         #创建Differ()对象
#
# diff = d.compare(text1_lines,text2_lines)       采用compare方法对字符串进行比较
# print('\n'.join(list(diff)))

d = difflib.HtmlDiff()
print(d.make_file(text1_lines,text2_lines))

示例2：difflib模块——对比nginx配置文件

　　当我们维护多个Nginx配置时，时常会对比不同版本配置文件的差异，使运维人员更加清晰的了解不同版本迭代后的更新项，实现的思路是读取两个需对比的配置文件，再以换行符作为分隔符，调用difflib.HtmlDiff()生成HTML格式的差异文档。

#!/usr/bin/evn python
# --*-- coding: utf-8 --*--
# Auther : Liu WeiDong


import difflib
import sys

#首先判断脚本是否传了正确参数

try:
    textfile1 = sys.argv[1]
    textfile2 = sys.argv[2]
except Exception as e:
    print("Error" + str(e))
    print("Usage: simple3.py filename1 filename2")
    sys.exit()

#定义一个读取文件的函数，以换行符进行分隔
def readfile(filename):
    try:
        with open(filename,'rb') as fin:
            text = fin.read().splitlines()
            return text
    except IOError as error:
        print("Read file Error:" + str(error))
        sys.exit()

text1_lines = readfile(textfile1)
text2_lines = readfile(textfile2)

d = difflib.HtmlDiff()
print(d.make_file(text1_lines,text2_lines))

 　  运行代码：　

# python simple3.py nginx.v1.conf nginx.v2.conf > diff.html

示例三：filecmp模块——文件与目录差异对比

　　模块常用方法说明：fileemp提供了三个操作方法，分别为cmp（单文件对比）、cmpfile（多文件对比）、dircmp（目录对比），下面逐一进行介绍：

•  单文件对比，采用filecmp.cmp (f1,f2[,shallow])方法，比较文件名为f1和f2的文件，相同返回True，不相同返回False，shallow默认为True。
•  多文件对比，采用filecmp.cmpfiles(dir1,dir2,common[,shallow])方法，对比dir1与dir2目录给定的文件清单。该方法返回文件名的三个列表，分别为匹配，不匹配，错误。匹配为包含匹配的文件的列表，不匹配反之，错误列表包括了目录不存在的文件、不具备读权限或其他原因导致的不能比较的文件清单。
• 目录对比，采用filecmp.dircmp(a,b[,ignore[,hide]])类创建一个目录比较对象，其中a和b是参加比较的目录名。ignore代表文件名忽略的列表，并默认为['RCS','CVS','tags']；hide代表隐藏的列表，默认为[os.curdir(当前目录),os.pardir(上一层目录)],dircmp类可以获得目录比较的详细信息，如只有在a目录中包括的文件、a与b都存在的子目录、匹配的文件等，同时支持递归。

示例四：校验源与备份目录差异

　　有时候我们无法确认备份目录与源目录文件是否一致，包括源目录中的新文件或目录、更新文件或目录有无成功同步，定期进行校验，没有成功则希望有针对性地进行补备份。

　　如下示例使用了filecmp模块的left_only、diff_files方法递归获取源目录的更新项，在通过shutil.copyfile、os.makedirs方法对更新项进行复制，最终保持一致状态。代码如下：

#!/usr/bin/evn python
# --*-- coding: utf-8 --*--
# Auther : Liu WeiDong

import os,sys
import filecmp
import re
import shutil

holderlist = []

# 定义一个函数，判断两个目录差异
def compareme(dir1,dir2):
    dircomp = filecmp.dircmp(dir1,dir2)
    only_in_leftdir = dircomp.left_only    #返回一个只在dir1中的文件或目录列表
    diff_in_leftdir = dircomp.diff_files   #显示返回两个目录中相同文件名，内容不同
    #dirpath = os.path.abspath(dir1)       # 定义源文件的绝对路径

    #将更新的文件名或目录追加到holderlist
    for i in only_in_leftdir:
        holderlist.append(os.path.abspath(os.path.join(dir1,i)))

    for i in diff_in_leftdir:
        holderlist.append(os.path.abspath(os.path.join(dir1,i)))

    #判断是否存在相同子目录，以便递归
    if len(dircomp.common_dirs) > 0:
        for i in dircomp.common_dirs:
            compareme(os.path.abspath(os.path.join(dir1,i)),os.path.abspath(os.path.join(dir2,i)))
        return holderlist

def main():
    if len(sys.argv) > 2:   #判断脚本参数个数是否大于2
        dir1 = sys.argv[1]
        dir2 = sys.argv[2]
    else:
        print("Usage: ",sys.argv[0]," datadir backupdir")
        sys.exit()

    #调用compareme函数，对传入的两个目录进行对比
    different_file = compareme(dir1,dir2)
    dir1 = os.path.abspath(dir1)

    if not dir2.endswith("/"):
        dir2 = dir2 + '/'
        dir2 = os.path.abspath(dir2)
        destination_files = []
        creatdir_bool = False

    for item in different_file:  #遍历返回的差异文件或目录列表
        destination_dir = re.sub(dir1,dir2,item)  #将源目录差异路径清单对应替换成备份目录
        destination_files.append(destination_dir) # 备份目录内容更新到定义的destination_files列表中
        if os.path.isdir(item):       # 如果差异路径为目录且不存在，则在备份目录中创建
            if not os.path.exists(destination_dir):
                os.makedirs(destination_dir)
                creatdir_bool = True

    if creatdir_bool:   #重新调用compareme函数，重新遍历创建目录的内容
        destination_files = []
        different_file = []
        different_file = compareme(dir1,dir2)
        for item in different_file:
            destination_dir = re.sub(dir1,dir2,item)
            destination_files.append(destination_dir)

    print("update item:")
    print(destination_files)
    copy_pair = zip(different_file,destination_files)
    for item in copy_pair:
        if os.path.isfile(item[0]):
            shutil.copyfile(item[0],item[1])

if __name__ == '__main__':
    main()