摘要： 网络爬虫 Web crawler 可以代替人工自动从互联网中进行数据信息的采集和整理 按照一定的规则自动抓取万维网上的信息程序或者脚本 从功能上区分为 数据采集 处理 储存 这三个部分 从流程上来说 从一个或者若干个网页URL地址去抓取指定的想要的内容 为什么学习爬虫 1 可以实现搜索引擎 2大数据 阅读全文