日志模块与第三方模块下载使用与第三模块之openpyxl

概要

• 日志模块的主要组成部分

• 日志模块的配置字典

• 如何在项目中使用日志模块

• 第三方模块的下载与使用

• 第三方模块之openpyxl

内容

日志模块的主要组成部分

import logging

1.logger对象:产生日志(类似于无包装的产品)

logger =logging.getlogger('转账记录')

2.filter对象：过滤日志(类似于剔除不良品)

注意：针对过滤功能完全可以不看 因为handler自带了基本的过滤功能

3.handler对象:控制日志的输出位置(文件、终端)(类似于产品分类)

输出到文件中

hd1 = logging.FileHandler('a1.log',encoding='utf-8')

输出到文件中

hd2 = logging.FileHandler('a2.log',encoding='utf-8')  

输出到终端

hd3 = logging.StreamHandler() 

4.format对象：控制日志的格式

fm1 = logging.Formatter(
        fmt='%(asctime)s - %(name)s - %(levelname)s -%(module)s:  %(message)s',
        datefmt='%Y-%m-%d %H:%M:%S %p',
)
fm2 = logging.Formatter(
        fmt='%(asctime)s - %(name)s:  %(message)s',
        datefmt='%Y-%m-%d',
)

5.给logger对象绑定handler对象

logger.addHandler(hd1)
logger.addHandler(hd2)
logger.addHandler(hd3)

6.给handler绑定formate对象

hd1.setFormatter(fm1)
hd2.setFormatter(fm2)
hd3.setFormatter(fm3)

7.设置日志等级

logger.setLevel(10)

8.记录日志

logger.debug('傻鸟')

配置字典

定义日志输出格式 开始

其中name为getloggerer指定的名字

定义日志输出格式 结束

import logging
import logging.config
standard_format = '[%(asctime)s][%(threadName)s:%(thread)d][task_id:%(name)s][%(filename)s:%(lineno)d]' \
                  '[%(levelname)s][%(message)s]'
simple_format = '[%(levelname)s][%(asctime)s][%(filename)s:%(lineno)d]%(message)s'

自定义文件路径

logfile_path = 'a3.log'

log配置字典

提前写好主体 CV简单修改即可

第一部分 CV

import logging
import logging.config
# 定义日志格式 开始(格式组合也可以去鸡哥博客里自己去组合)
standard_format = '[%(asctime)s][%(threadName)s:%(thread)d][task_id:%(name)s][%(filename)s:%(lineno)d]' \
                  '[%(levelname)s][%(message)s]'  # 其中name为getlogger指定的名字
simple_format = '[%(levelname)s][%(asctime)s][%(filename)s:%(lineno)d]%(message)s'
# 定义日志输出格式 结束

第二个部分：CV

自定义文件路径

logfile_path = 'a3.log'

第三个部分：CV

log配置字典 (以后要用log配置字典 直接cv下面代码即可)

LOGGING_DIC = {
    'version': 1,
    'disable_existing_loggers': False,
    'formatters': {
        'standard': {
            'format': standard_format
        },
        'simple': {
            'format': simple_format
        },
    },
    'filters': {},  # 过滤日志
    'handlers': {
        #打印到终端的日志
        'console': {
            'level': 'DEBUG',
            'class': 'logging.StreamHandler',  # 打印到屏幕
            'formatter': 'simple'
        },
        #打印到文件的日志,收集info及以上的日志
        'default': {
            'level': 'DEBUG',
            'class': 'logging.handlers.RotatingFileHandler',  # 保存到文件
            'formatter': 'standard',
            'filename': logfile_path,  # 日志文件
            'maxBytes': 1024*1024*5,  # 日志大小 5M
            'backupCount': 5,
            'encoding': 'utf-8',  # 日志文件的编码，再也不用担心中文log乱码了
        },
    },
    'loggers': {
        #logging.getLogger(__name__)拿到的logger配置
        '': {
            'handlers': ['default', 'console'],  # 这里把上面定义的两个handler都加上，即log数据既写入文件又打印到屏幕
            'level': 'DEBUG',
            'propagate': True,  # 向上（更高level的logger）传递
        },  # 当键不存在的情况下 (key设为空字符串)默认都会使用该k:v配置
         '注册记录': {
             'handlers': ['console'],  # 这里把上面定义的两个handler都加上，即log数据既写入文件又打印到屏幕
             'level': 'WARNING',
             'propagate': True,  # 向上（更高level的logger）传递
         },  # 当键不存在的情况下 (key设为空字符串)默认都会使用该k:v配置
    },
}

第四部分：需要我们自己写三行代码 不能CV了

使用日志字典配置我们自己需要调用和书写代码的三句话：一般有在第三部分用了几个自己想要记录的logger 输出结果是在终端还是在文件内得看第三部分定义在哪个部分

logging.config.dictConfig(LOGGING_DIC) # 自动加载字典中的配置

logger1 = logging.getLogger('转账记录') # 修改自己想要记录的事情

logger2 = logging.getLogger('注册记录')

logger1.debug('好好的 不要浮躁 努力就有收获')

logger2.warning('尊敬的VIP客户 晚上好 您又来啦')

注意：如果你写的代码中logger中想要记录的对象再第三部分logger配置第一个用空字符串作为字典的键 当系统用我们写的logger对不上logger配置时 系统会默认拿我们写的logger对象匹配到第三部分空号字符对应的配置输出日志记录

logging.config.dictConfig(LOGGING_DIC) # 自动加载字典中的配置
logger1 = logging.getLogger('红浪漫顾客消费记录')
'''loggers配置中使用空字符串作为字典的键 兼容性最好!!!'''
logger1.debug('戴小龙 卿阳华 赵其辉')

第三方模块（需要基于网络下载）

1.如何查看我们的解释器都有哪些内置模块:通过在cmd终端下输入pip即可找到我们那些模块

2.如何下载第三方模块：需要使用python解释器提供的pip工具

pip工具的位置：是在python解释器文件夹内的scripts目录下

如果要在终点中直接使用pip目录 需要先添加到环境变量中

pip工具的路径: D:\python36\scripts

我们在使用pip工具的时候 为了区分版本会人为的将python3的pip工具写成pip3

python2中的pip工具写成pip

3.如何查看当前解释器下载的第三方模块(通常都是借助于编辑器查看，比如pycharm)

settings>>project>>python interprter>>会列举出所有的第三方模块

纯净的解释器默认只有两个：pip 、setuptools

4.如何下载第三方模块

4.1 方式1：直接使用命令行(cmd终端直接敲pip3 install 加上你需要下载的模块名) 直接敲pip3 install +需要下载的模块名

需要注意的是：该方式默认下载的是最新版本

pip3 install +模块名==版本号 还可以自定义下载所需要的模块的版本号

ps:pip工具默认是从国外的仓库下载模块 速度会比较慢 所以是可以修改下载地址的

格式：pip3 install 模块名 - i 仓库地址

针对仓库地址：可以百度搜索pip源即可获得

(1) 阿里云

http://mirrors.aliyun.com/pypi/simple/

(2) 豆瓣

http://pypi.douban.com/simple/

(3)清华大学

https://pypi.tuna.tsinghua.edu.cn/simple/

(4)中国科学技术大学

http://pypi.mirrors.ustc.edu.cn/simple/

(5)华中科技大学

http://pypi.hustunique.com/

方式2：利用编程软件提供的快捷方法

还是今日到查看下载的第三方模块界面

双击任意一个模块名称或者左下角加号按钮

在搜索框中输入你想要下载的模块即可

并且可以在左侧勾选specify version选择版本

pycharm可以换源

左下方点击manage repositoires 管理地址即可

在下载第三方模块时候可能会报错

1.报错信息中含有timeout关键字

原因是你当前计算机的网络不稳定 重新执行多次或者切换网络

2.报错信息中没有太多的关键字 并且很长

拷贝最后一行错误信息 去百度

格式：pip3下载模块名报错错误信息

openpyxl模块

对于第三方模块 统一的学习策略是看文档学习

pip install openpyxl

将文档中的代码拷贝执行查看效果从而推导功能

excel文件的版本及后缀
2003版本之前 excel的文件后缀是xls
2003版本之后 excel的文件后缀是xlsx、csv
在python中能够处理excel文件的模块有很多 其中最出名的有
xlrd、xlwt分别控制excel文件的读写 能够兼容所有版本的文件
openpyxl针对03版本之前的兼容性可能不好 但是功能更加强大

1.如何创建Excel文件及创建相应的工作簿

from openpyxl import workbook
wb =Workbook()  # 创建excel文件
wb1 =wb.creat_sheet('学员名单')
wb2 = wb.create_sheet('缴费名单')
wb3 = wb.create_sheet('消费记录')

还可以指定工作簿位置

wb4 = wb.create_sheet('线上赌场', 0)

修改文件内小标题

wb1.title = '学员名单名称修改'

保存excel文件

wb.save('111.xlsx')

2.如何书写数据

2.1 写普通数据方式1 依据表格坐标写

  wb1['A3'] = 666

2.2 写普通数据方式2 依据（行，列，值）

wb1.cell(row=3, column=4, value=999)

2.3 批量写普通数据append()

wb1.append(['id','username','password'])

2.4 写数据公式(也可以在python代码中处理完毕以普通数据写入)

wb1['A6'] = '=sum(A4:A5)'

3.如何读数据

获取1.xlsx中所有的工作簿名称 结果是列表数据类型

from openpyxl import load_workbook
wb = load_workbook('1.xlsx',read_only=True,data_only=True)
print(wb.sheetnames)
wb1 = wb['test']  # 拿到工作薄test对象

3. 1 第一种取值方式

print(wb1['A3'].value) # 不是结果 需要再点value
print(wb1['A6'].value)  # 获取用函数统计的数据，发生无法取到值

第一需要加一个参数
第二需要人为的先去修改一下用程序产生的excel表格(不可能用程序产生excel文件之后又直接再用程序去读入，这样没有任何实际意义 通常用程序创建好表格后给人看，人讲自己修改的表格再交由程序处理)

3.2第二种取值方式

print(wb1.cell(row=3,column=4).value)

3.3 获取一行行的数据

3.3.1 拿到每一行的数据

for row in wb1.rows:

3.3.2 拿到一行行数据里面每一个单元格的数据

for data in row: 
    print(data.value)

3.3.3 获取一列列的数据(如果想获取 必须把readonly去掉)

3.3.3.1 拿到每一列的数据

for column in wb1.columns:

3.3.3.2 拿到一列列数据里面每一个单元格的数据

for r in column: 
       print(r.value)

3.3.4 获取最大的行数和列数

print(wb1.max_row)
print(wb1.max_column)