摘要: 2.requests模块方法 requests是基于Python开发的HTTP库,使用Requests可以轻而易举的完成浏览器可有的任何操作。 以上方法均是在此方法的基础上构建 method 包括 psot、get、put等等 kwargs 包括常用参数 , , get方法仅限的参数传递方式 , , 阅读全文
posted @ 2017-08-28 19:51 六神酱 阅读(195) 评论(0) 推荐(0) 编辑
摘要: 爬虫 基本操作 多进程、线程、协程 高性能相关(socket select) twisted tornado gevent web版微信(练习) Scrapy框架(爬虫框架)规则 自己的爬虫框架 1.基本操作 定向爬取(只爬一个网站)和广泛的爬取(通过友情链接) 爬取某url中的指定内容: 发送ht 阅读全文
posted @ 2017-08-28 19:49 六神酱 阅读(173) 评论(0) 推荐(0) 编辑