2019年3月23日
1.scrapy基础知识
摘要： 一、基础知识 1.网络爬虫 （1）爬虫的分类 通用网络爬虫：又称全网爬虫，常见的有百度和Google等搜索引擎，爬行对象从一些初始URL扩充到整个网络，主要为门户站点搜索引擎和大型网站服务采集数据，这在网络上通常称为搜索引擎 聚焦网络爬虫、增量式网络爬虫、深层网络爬虫：这类爬虫比较有目的，也就是网络 阅读全文
posted @ 2019-03-23 21:55 凉生暖至 阅读(158) 评论(0) 推荐(0) 编辑
2.运行错误
摘要： 一、常见基础错误 1、for i in len(a): TypeError: 'int' object is not iterable for循环中的递增迭代：对于数组的索引迭代，需要用到len（）求数组的长度，用range进行索引迭代。 for i in len(a):在这句循环的时候，本来我的意 阅读全文
posted @ 2019-03-23 10:41 凉生暖至 阅读(136) 评论(0) 推荐(0) 编辑