摘要: 在编写爬虫进行网页数据的时候,大多数情况下,需要在请求是增加请求头,下面介绍一个python下非常好用的伪装请求头的库:fake-useragent,具体使用说明如下: 1.在scrapy中的使用 第一步 第二步:在middlewares中配置下载中间件。 第三步:在settings中配置 2不是在 阅读全文
posted @ 2018-12-13 09:20 菜鸟程序猿_python 阅读(624) 评论(0) 推荐(0) 编辑