2022年3月6日

scrapy框架入门

摘要: scrapy迄今为止依然是世界上最好用,最稳定的爬虫框架,相比于其他直接由函数定义的程序, scrapy使用了面向对象并对网页请求的过程分成了很多个模块和阶段,实现跨模块和包的使用,大大提升了代码的稳定性和可操作性。那么scrapy将网页请求过程分成以下这么多步骤和模块: 我们需要将网页url传入s 阅读全文

posted @ 2022-03-06 22:35 huxiaofeng 阅读(33) 评论(0) 推荐(0) 编辑

导航