py---------常用模块2

一、hashilb 模块

python的hashlib提供了常见的摘要算法，如MD5,SHA1等等。

什么是摘要算法呢？摘要算法又称哈希算法、散列算法。它通过一个函数，把任意长度的数据转换为一个长度固定的数据串（通常用16进制的字符串表示）。

摘要算法就是通过 摘要函数f() 对 任意长度的数据data 计算出 固定的长度的摘要digest，目的是为了发现原始数据是否被人被人篡改过。

摘要算法之所以能指出数据是否被篡改过，就是因为摘要函数是一个单向函数，计算（data）很容易，但通过digest发推data确非常难。而且，对原始数据做一个bit的修改，都会导致计算出的摘要完全不同。

常见的摘要算法MD5为例，计算出一个字符串的MD5值：

import hashlib

md5 = hashlib.md5()   #实例化一个MD5摘要算法对象
#能够让一个字符串 唯一的 对应 一个固定的值
md5.update('alex3714'.encode('utf-8'))  #使用MD5算法的对象来操作字符串
#获取算法结果
ret = md5.hexdigest()    #获取算法的结果hexdigest 16进制消化
print(ret,type(ret),len(ret))

#校验步骤
#注册：alex3714 -摘要->文件
#登录 alex3714-摘要，和文件里面字符串对比，

 如果数据量很大,如检验文件的一致性，好几百G可以分批量摘要，可以分块多次调用update()，最后计算的结果是一样的：

md5 = hashlib.md5()
md5.update('alex'.encode('utf-8'))
md5.update('3714'.encode('utf-8'))

ret = md5.hexdigest()
print(ret)

撞库概念 MD5:

#别人有一个庞大的库：字符串-->md5值的关系
#加盐办法解决
md5obj = hashlib.md5('erxiao'.encode('utf8'))   #实例化一个MD5算法的对象，加盐 xiao
ret = md5obj.hexdigest()
print(ret)

 动态加盐：

#动态加盐
# 常用到到userinfo表存密码时候
username = 'alex'
md5obj = hashlib.md5(username.encode('utf-8'))      #实例化一个MD5摘要算法的对象，加盐
md5obj.update('alex3714'.encode('utf-8'))   # 使用md5算法的对象来操作字符串
ret = md5obj.hexdigest()    # 获取算法的结果 hex+digest 16进制+消化
print(ret)

#ee838c58e5bb3c9e687065edd0ec454f

MD5是最常见的摘要算法，速度很快，生成结果是固定的128 bit字节，通常用一个32位的16进制字符串表示。另一种常见的摘要算法是SHA1，调用SHA1和调用MD5完全类似：
SHA1的结果是160 bit字节，通常用一个40位的16进制字符串表示。比SHA1更安全的算法是SHA256和SHA512，不过越安全的算法越慢，而且摘要长度更长。

二、configparser模块

该模块适用于配置文件的格式与windows ini文件类似，可以包含一个或多个节（section），每个节可以有多个参数（键=值）。

1.创建文件

 常用文件格式：

[DEFAULT]
ServerAliveInterval = 45
Compression = yes
CompressionLevel = 9
ForwardX11 = yes
  
[bitbucket.org]
User = hg
  
[topsecret.server.com]
Port = 50022
ForwardX11 = no

用python生成一个这样的文档

import configparser

config = configparser.ConfigParser()
config['DEFAULT'] = {'ServerAliveInterval':45,
                      'Compression':'yes',
                      'CompressionLevel':'9',
                      'Forward11':'yes'
　　　　　　　　　　　　}
config['bitbucket.org'] = {'User':'alex'}
config['topsecret.server.com'] = {'HostPort':'11211','Forwardxll':'no'
　　　　　　　　　　　　　　　　　　　　}
with open('example.ini', 'w') as configfile:
    config.write(configfile)

 2、查找文件

import configparser

config = configparser.ConfigParser()

#---------------------------查找文件内容,基于字典的形式

print(config.sections())        #  []

config.read('example.ini')

print(config.sections())        #   ['bitbucket.org', 'topsecret.server.com']

print('bytebong.com' in config) # False
print('bitbucket.org' in config) # True


print(config['bitbucket.org']["user"])  # alex

print(config['DEFAULT']['Compression']) #yes

print(config['topsecret.server.com']['ForwardX11'])  #no


print(config['bitbucket.org'])          #<Section: bitbucket.org>

for key in config['bitbucket.org']:     # 注意,有default会默认default的键
    print(key)

print(config.options('bitbucket.org'))  # 同for循环,找到'bitbucket.org'下所有键

print(config.items('bitbucket.org'))    #找到'bitbucket.org'下所有键值对

print(config.get('bitbucket.org','compression')) # yes       get方法Section下的key对应的value

  3、增删改查

import configparser

config = configparser.ConfigParser()

config.read('example.ini')

config.add_section('yuan')



config.remove_section('bitbucket.org')
config.remove_option('topsecret.server.com',"forwardx11")


config.set('topsecret.server.com','k1','11111')
config.set('yuan','k2','22222')

config.write(open('new2.ini', "w"))

 三、loging模块

 1、函数简单配置

import logging

logging.debug('debug message')
logging.info('info message')
logging.warning('warning message')
logging.error('error message')
logging.critical('cretical message')

WARNING:root:warning message
ERROR:root:error message
CRITICAL:root:cretical message

 默认情况下Python的logging模块将日志打印到了标准输出中，且只显示了大于等于WARNING级别的日志。

 这说明默认的日志级别设置为WARNING（日志级别等级CRITICAL > ERROR > WARNING > INFO > DEBUG）

默认的日志格式为日志级别：Logger名称：用户输出消息。

 灵活配置日志级别，日志格式，输出位置:

import logging

logging.basicConfig(level=logging.DEBUG,
                    format = '%(asctime)s %(filename)s[line:%(lineno)d] %(levelname)s %(message)s',
                    datefmt='%a,%d %b %Y %H:%M:%S',
                    filename='test.log',
                    filemode='w'
                    )
logging.debug('debug message')           #非常详细的日志 --排查错误的时候使用
logging.info('info message')             # 正常的日志信息
logging.warning('warning message')       #警告
logging.error('error message')           #错误
logging.critical('critical message')     #严重错误

logging.basicConfig()函数中可通过具体参数来更改logging模块默认行为，可用参数有：

filename：用指定的文件名创建FiledHandler，这样日志会被存储在指定的文件中。
filemode：文件打开方式，在指定了filename时使用这个参数，默认值为“a”还可指定为“w”。
format：指定handler使用的日志显示格式。
datefmt：指定日期时间格式。
level：设置rootlogger（后边会讲解具体概念）的日志级别
stream：用指定的stream创建StreamHandler。可以指定输出到sys.stderr,sys.stdout或者文件(f=open(‘test.log’,’w’))，默认为sys.stderr。若同时列出了filename和stream两个参数，则stream参数会被忽略。

format参数中可能用到的格式化串：
%(name)s Logger的名字
%(levelno)s 数字形式的日志级别
%(levelname)s 文本形式的日志级别
%(pathname)s 调用日志输出函数的模块的完整路径名，可能没有
%(filename)s 调用日志输出函数的模块的文件名
%(module)s 调用日志输出函数的模块名
%(funcName)s 调用日志输出函数的函数名
%(lineno)d 调用日志输出函数的语句所在的代码行
%(created)f 当前时间，用UNIX标准的表示时间的浮 点数表示
%(relativeCreated)d 输出日志信息时的，自Logger创建以 来的毫秒数
%(asctime)s 字符串形式的当前时间。默认格式是 “2003-07-08 16:49:45,896”。逗号后面的是毫秒
%(thread)d 线程ID。可能没有
%(threadName)s 线程名。可能没有
%(process)d 进程ID。可能没有
%(message)s用户输出的消息

 

2、 logger对象配置

import logging
logger = logging.getLogger()    #创建一个logger 实例，用于所有日志，填写空获取当前用户
logger.setLevel(logging.DEBUG)  #设置logger 全局变量的日志级别

# 全部日志
file_log1 = logging.FileHandler('access.log',encoding='utf-8')   # 用于写入文件
file_log1.setLevel(logging.INFO)       # 局部设置写入file_log文件级别日志，
formatter = logging.Formatter('%(asctime)s - %(name)s - %(levelname)s - %(message)s')    # 创建格式
file_log1.setFormatter(formatter)  # 把格式附給文件日志
# 错误日志
file_log2 = logging.FileHandler('error.log',encoding='utf-8')
file_log2.setLevel(logging.ERROR)      # 记录错误日志
file_log2.setFormatter(formatter)

# 添加文件日志到实例，实例化日志
logger.addHandler(file_log1)
logger.addHandler(file_log2)

# # 创建控制台输出日志，,测试日志功能的时候用，用的时候把这段删除
# console_log = logging.StreamHandler()         # 创建一个控制台实例
# console_log.setLevel(logging.DEBUG)           # 设置控制台打印的日志级别DEBUG
# console_log.setFormatter(formatter)           # 格式日志格式
# logger.addHandler(console_log)                  # 实例化日志

# 测试数据
logger.debug('dasdadsa')
logger.info('asdsfaefee')
logger.warning('log1 waring message')
logger.error('log1 error message')
logger.critical('log1  critical message')

import logging


class Logger():
    # 定义一个属性，日志级别
    set_logging = [
        logging.DEBUG,     # 0
        logging.INFO,      # 1
        logging.WARNING,   # 2
        logging.ERROR,     # 3
        logging.CRITICAL,  # 4
    ]
    def __init__(self, logname, loglevel, logger):
        '''
           指定保存日志
           的文件路径，日志级别，以及调用文件
        '''

        # 创建一个logger实例
        self.logger = logging.getLogger(logger)
        self.logger.setLevel(logging.DEBUG)

        # 创建一个handler，用于写入日志文件
        file_log = logging.FileHandler(logname,encoding="utf-8")
        file_log.setLevel(loglevel)

        # 再创建一个handler，用于输出到控制台
        ch_log = logging.StreamHandler()
        ch_log.setLevel(loglevel)

        # 定义handler的输出格式
        formatter = logging.Formatter('%(asctime)s - %(name)s - %(levelname)s - %(message)s')
        file_log.setFormatter(formatter)
        ch_log.setFormatter(formatter)

        # 给logger添加handler
        self.logger.addHandler(file_log)
        self.logger.addHandler(ch_log)

    def getlog(self):
        return self.logger


# 调用
logger = Logger(logname='log.txt', loglevel=Logger.set_logging[1], logger="").getlog().info("dasdasd")