摘要: 格式化文件转对象 爬虫构造请求头时,需要用到字典,在浏览器F12查看请求头,发现是类字典冒号分割文本,将其直接复制到本地文件,转化为字典对象,可拿来直接使用.代码是具有可扩展性的,需要其他格式转化为对象时,只用增加转化函数,自动提供文件名处理,持久化导入导出功能. 代码如下: 阅读全文
posted @ 2018-07-21 13:05 WY~记录 阅读(223) 评论(0) 推荐(0) 编辑
摘要: [TOC] urllib库 python内置的http请求库 官方文档: 一个web测试网站: 1.urllib.request(请求模块) "返回目录" urlopen 发送请求 + url:链接,字符串 + data:post方式表单,bytes类型 + data = bytes(urllib. 阅读全文
posted @ 2018-07-21 09:24 WY~记录 阅读(500) 评论(0) 推荐(0) 编辑