2019年12月22日
python——爬取图片（shutter图片网）
摘要： 在本爬虫程序中共有三个模块： 1、爬虫调度端：启动爬虫，停止爬虫，监视爬虫的运行情况 2、爬虫模块：包含三个小模块，URL管理器、网页下载器、网页解析器。 （1）URL管理器：对需要爬取的URL和已经爬取过的URL进行管理，可以从URL管理器中取出一个待爬取的URL，传递给网页下载器。 （2）网页下 阅读全文
posted @ 2019-12-22 11:30 余生情指教 阅读(1262) 评论(0) 推荐(0) 编辑