摘要: 在写scrapy的spider类的parse方法的时候,有些链接需要提取出来继续爬取,这里scrapy提供了一些方法可以方便的实现这个功能,总结如下: 假设我们的目标a标签是target_a 方法1: 方法2 方法2变种1 方法2变种2 解释 方法1:直接获取到下一页的绝对url,yield一个新R 阅读全文
posted @ 2018-07-24 21:39 蜕变C 阅读(4262) 评论(0) 推荐(0) 编辑
摘要: 你到一个商店买东西,刚好你要的东西没有货,于是你在店员那里留下了你的电话,过了几天店里有货了,店员就打了你的电话,然后你接到电话后就到店里去取了货。 在这个例子里,你的电话号码就叫回调函数, 你把电话留给店员就叫登记回调函数, 店里后来有货了叫做触发了回调关联的事件, 店员给你打电话叫做调用回调函数 阅读全文
posted @ 2018-07-24 16:08 蜕变C 阅读(177) 评论(0) 推荐(0) 编辑