随笔分类 -  爬虫

Scrapy中发送请求的固定逻辑?为什么要这样写?
摘要：在Scrapy中,所有的请求都是通过yield Request(url,callback=self.parse2)这样的方式来发送的。这里的callback是为了告诉scrapy请求回来后应该去找谁 要理解这个,需要先知道Scrapy的请求流程,用一句话概括就是:所有的请求都要经过引擎交给调度器,然 阅读全文
posted @ 2024-09-10 01:45 无悔的选择 阅读(8) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示