Python Scrapy 自动爬虫注意细节(3)

一、对指定页面爬取

  yield Request(url, meta={'cookiejar': response.meta['cookiejar']}, callback=self.parse_url)

  parse_url :处理函数

  url :指定链接

  cookiejar:登录验证后的cookie

  yield :必须使用yield 

二、Python 中 yield 用法

  http://blog.163.com/l_greatsea/blog/static/2049860442013220113640476/

posted @ 2016-12-25 22:56  咸鱼翻身  阅读(541)  评论(0编辑  收藏  举报