摘要： 学习爬虫技术已经很久了，想着是时候写一些爬虫的心得了，首先，爬虫是什么呢？百度可得：网络爬虫是一种程序,主要用于搜索引擎,它将一个网站的所有内容与链接进行阅读,并建立相关的全文索引到数据库中,然后跳到另一个网站.样子好像一只大蜘蛛.简单来讲可以分为两个步骤： 1.获取资源 2.从资源中提取你要的东西 阅读全文