乐之之

知而行乐,乐而行之,天道酬勤,学无止境。

2023年3月29日

scrapy爬虫框架(一)入门介绍

摘要: 在爬虫过程中,每次写一个爬虫程序时,都会从研究网页信息基本情况,所用到的库和方法。每次写基础代码时,都会略显繁琐。之前我也曾想过自己写一个基础的框架,从请求到响应再到解析和数据的保存。实现代码复用率,但发现其实并不用自己再造一遍轮子,因为市面上已经有了强大的异步框架--scrapy。我们只需要在此框 阅读全文

posted @ 2023-03-29 18:11 乐之之 阅读(124) 评论(0) 推荐(0) 编辑