常用模块

参考

参考2

一、hashlib

摘要算法

什么是摘要算法呢？摘要算法又称哈希算法、散列算法。

它通过一个函数，把任意长度的数据转换为一个长度固定的数据串（通常用16进制的字符串表示）。

Python的hashlib提供了常见的摘要算法，如MD5，SHA1等等。

# sha算法:随着算法复杂程度的增加 摘要的时间成本空间成本都会增加

摘要算法就是通过摘要函数f()对任意长度的数据data计算出固定长度的摘要digest，目的是为了发现原始数据是否被人篡改过。

摘要算法之所以能指出数据是否被篡改过，就是因为摘要函数是一个单向函数，计算f(data)很容易，但通过digest反推data却非常困难。而且，对原始数据做一个bit的修改，都会导致计算出的摘要完全不同。

我们以常见的摘要算法MD5为例，计算出一个字符串的MD5值：

import hashlib   # 提供摘要算法的模块
sha = hashlib.md5()
sha.update(b'how to use md5 in python hashlib?')
print(sha.hexdigest())  #d26a53750bc40b38b65a520292f69306

如果数据量很大，可以分块多次调用update()，最后计算的结果是一样的：

sha = hashlib.md5()
sha.update(b'how to use md5 in ')
sha.update(b'python hashlib?')
print(sha.hexdigest())  #d26a53750bc40b38b65a520292f69306

以上加密算法虽然依然非常厉害，但时候存在缺陷，即：通过撞库可以反解。所以，有必要对加密算法中添加自定义key再来做加密。

# 加盐
import hashlib   # 提供摘要算法的模块
# md5 = hashlib.md5()
md5 = hashlib.md5(bytes('盐',encoding='utf-8'))
md5.update(b'123456')
print(md5.hexdigest())  #970d52d48082f3fb0c59d5611d25ec1e

# 动态加盐
# 用户名 密码
# 使用用户名的一部分或者 直接使用整个用户名作为盐
import hashlib   
md5 = hashlib.md5(bytes('盐',encoding='utf-8')+b'')
md5.update(b'123456')
print(md5.hexdigest())

# 登录认证
# 加密 --> 解密
# 摘要算法

# 不管算法多么不同，摘要的功能始终不变
# 对于相同的字符串使用同一个算法进行摘要，得到的值总是不变的
# 使用不同算法对相同的字符串进行摘要，得到的值应该不同
# 不管使用什么算法，hashlib的方式永远不变


# 摘要算法的应用：
# 1 密码的密文存储
# 2 文件的一致性验证：
    # (1)在下载的时候 检查我们下载的文件和远程服务器上的文件是否一致
    # (2)两台机器上的两个文件 你想检查这两个文件是否相等

# 用户注册
    # 用户输入用户名
    # 用户输入密码
    # 将明文的密码进行摘要，拿到一个密文的密码
    # 写入文件


# 用户的登录
# import hashlib
# usr = input('username :')
# pwd = input('password : ')
# with open('userinfo') as f:
#     #userinfo.py:   alex|aee949757a2e698417463d47acac93df|Teacher
#     for line in f:
#         user,passwd,role = line.split('|')
#         md5 = hashlib.md5()
#         md5.update(bytes(pwd,encoding='utf-8'))
#         md5_pwd = md5.hexdigest()
#         if usr == user and md5_pwd == passwd:
#             print('登录成功')

二、configparse

该模块适用于配置文件的格式与windows ini文件类似，可以包含一个或多个节（section），每个节可以有多个参数（键=值）。

创建文件

来看一个好多软件的常见文档格式如下：

[DEFAULT]
ServerAliveInterval = 45
Compression = yes
CompressionLevel = 9
ForwardX11 = yes
  
[bitbucket.org]
User = hg
  
[topsecret.server.com]
Port = 50022
ForwardX11 = no

可以使用python生成一个这样的一个文档：

import configparser
config = configparser.ConfigParser()
config["DEFAULT"] = {'ServerAliveInterval': '45',
                      'Compression': 'yes',
                     'CompressionLevel': '9',
                     'ForwardX11':'yes'
                     }
config['bitbucket.org'] = {'User':'hg'}

config['topsecret.server.com'] = {'Host Port':'50022','ForwardX11':'no'}

#生成配置文件
with open('example.ini', 'w') as f:   #以写的形式打开一个配置文件，拿到了一个文件操作符
   config.write(f)

[DEFAULT]
serveraliveinterval = 45
compression = yes
compressionlevel = 9
forwardx11 = yes

[bitbucket.org]
user = hg

[topsecret.server.com]
host port = 50022
forwardx11 = no

查找文件：

import configparser
config = configparser.ConfigParser()
#---------------------------查找文件内容,基于字典的形式
# print(config.sections())        #  []

config.read('example.ini')
print(config.sections())        #   ['bitbucket.org', 'topsecret.server.com']  #不显示[DEFAULT]

print('bytebong.com' in config) # False  判断节是否在配置文件里
print('bitbucket.org' in config) # True

# 取值
print(config['bitbucket.org']["user"])  # hg
print(config['DEFAULT']['Compression']) #yes
print(config['topsecret.server.com']['ForwardX11'])  #no

print(config['bitbucket.org'])          #<Section: bitbucket.org>

#不知道组中有什么名字我们可以用循环取
for key in config['bitbucket.org']:     # 注意,有default会默认拿default的键
    print(key)
    # user
    # serveraliveinterval
    # compression
    # compressionlevel
    # forwardx11

print(config.options('bitbucket.org'))  # 同for循环,找到'bitbucket.org'下所有键
#['user', 'serveraliveinterval', 'compression', 'compressionlevel', 'forwardx11']

print(config.items('bitbucket.org'))    #找到'bitbucket.org'下所有键值对
# [('serveraliveinterval', '45'), ('compression', 'yes'), ('compressionlevel', '9'), ('forwardx11', 'yes'), ('user', 'hg')]

print(config.get('bitbucket.org','compression')) # yes       get方法Section下的key对应的value

增删改操作：

import configparser
config = configparser.ConfigParser()
config.read('example.ini')   # 读文件
config.add_section('yuan')   # 增加section
config.remove_section('bitbucket.org')   # 删除一个section
config.remove_option('topsecret.server.com',"forwardx11")  # 删除一个配置项
config.set('topsecret.server.com','k1','11111')    #在组'topsecret.server.com'里新建了一个k1=11111
config.set('yuan','k2','22222')
f = open('new2.ini', "w")  #以写的方式打开一个文件
config.write(f) # 写进文件
f.close()

[DEFAULT]
serveraliveinterval = 45
compression = yes
compressionlevel = 9
forwardx11 = yes

[topsecret.server.com]
host port = 50022
k1 = 11111

[yuan]
k2 = 22222

三、logging(******)

日志：用来记录用户行为或者代码的执行过程

1 日志级别

logging.debug('debug message')          # 低级别的 # 排错信息
logging.info('info message')            # 正常信息
logging.warning('warning message')      # 警告信息                 #WARNING:root:warning message
logging.error('error message')          # 错误信息                 #ERROR:root:error message
logging.critical('critical message')    # 高级别的 # 严重错误信息    #CRITICAL:root:critical message

默认情况下Python的logging模块将日志打印到了标准输出中，且只显示了大于等于WARNING级别的日志，这说明默认的日志级别设置为WARNING（日志级别等级CRITICAL > ERROR > WARNING > INFO > DEBUG），默认的日志格式为日志级别：Logger名称：用户输出消息。

2 配置方式

(1)basicconfig配置

# basicconfig 简单 能做的事情相对少
    # 不能解决中文的乱码问题
    # 不能同时往文件和屏幕上输出
import logging
logging.basicConfig(level=logging.WARNING,
                    format='%(asctime)s %(filename)s[line:%(lineno)d] %(levelname)s %(message)s',
                    datefmt='%a, %d %b %Y %H:%M:%S')
try:
    int(input('num >>'))
except ValueError:
    logging.error('输入的值不是一个数字')
'''
    num >>你好
    Fri, 29 May 2020 20:24:58 3.logging.py[line:22] ERROR 输入的值不是一个数字
'''

logging.basicConfig()函数中可通过具体参数来更改logging模块默认行为，可用参数有：

filename：用指定的文件名创建FiledHandler，这样日志会被存储在指定的文件中。
filemode：文件打开方式，在指定了filename时使用这个参数，默认值为“a”还可指定为“w”。
format：指定handler使用的日志显示格式。
datefmt：指定日期时间格式。
level：设置rootlogger（后边会讲解具体概念）的日志级别
stream：用指定的stream创建StreamHandler。可以指定输出到sys.stderr,sys.stdout或者文件(f=open(‘test.log’,’w’))，默认为sys.stderr。若同时列出了filename和stream两个参数，则stream参数会被忽略。

format参数中可能用到的格式化串：
%(name)s Logger的名字
%(levelno)s 数字形式的日志级别
%(levelname)s 文本形式的日志级别
%(pathname)s 调用日志输出函数的模块的完整路径名，可能没有
%(filename)s 调用日志输出函数的模块的文件名
%(module)s 调用日志输出函数的模块名
%(funcName)s 调用日志输出函数的函数名
%(lineno)d 调用日志输出函数的语句所在的代码行
%(created)f 当前时间，用UNIX标准的表示时间的浮 点数表示
%(relativeCreated)d 输出日志信息时的，自Logger创建以 来的毫秒数
%(asctime)s 字符串形式的当前时间。默认格式是 “2003-07-08 16:49:45,896”。逗号后面的是毫秒
%(thread)d 线程ID。可能没有
%(threadName)s 线程名。可能没有
%(process)d 进程ID。可能没有
%(message)s用户输出的消息

(2) logger对象配置：

# 配置log对象 稍微有点复杂 能做的事情相对多
# 让程序的充分解耦，变得高可定制
import logging
logger = logging.getLogger()
fh = logging.FileHandler('log.log',encoding='utf-8')# 创建一个handler，用于写入日志文件  (文件的名称，编码格式)
sh = logging.StreamHandler()    # 创建一个屏幕控制对象
formatter = logging.Formatter('%(asctime)s - %(name)s - %(levelname)s - %(message)s')
formatter2 = logging.Formatter('%(asctime)s - %(name)s - %(levelname)s [line:%(lineno)d] : %(message)s')
# 把文件操作符 和 格式关联起来
fh.setFormatter(formatter)
sh.setFormatter(formatter2)
# 把logger对象 和 文件操作符 关联起来
logger.addHandler(fh)
logger.addHandler(sh)
logging.debug('debug message')       # 低级别的 # 排错信息
logging.info('info message')         # 正常信息
logging.warning('警告错误')           # 警告信息
logging.error('error message')       # 错误信息
logging.critical('critical message') # 高级别的 # 严重错误信息

logging库提供了多个组件：Logger、Handler、Filter、Formatter。Logger对象提供应用程序可直接使用的接口，Handler发送日志到适当的目的地，Filter提供了过滤日志信息的方法，Formatter指定日志显示格式。另外，可以通过：logger.setLevel(logging.Debug)设置级别,当然，也可以通过

fh.setLevel(logging.Debug)单对文件流设置某个级别。