摘要：
一、什么是requests 模块 requests模块是python中原生的基于网络请求的模块，功能强大，用法简洁高效。在爬虫领域中占据着半壁江山的地位。requests模块作用：模拟浏览器发请求。 二、为什么要使用requests 模块 因为在使用urllib模块的时候，会有诸多不便之处，总结如下 阅读全文
摘要：
一、HTTP协议 1.简介 HTTP协议是Hyper Text Transfer Protocol（超文本传输协议）的缩写, 是用于从万维网（WWW:World Wide Web ）服务器传输超文本到本地浏览器的传送协议。 HTTP协议就是服务器（Server）和客户端（Client）之间进行数据交 阅读全文
摘要：
什么是爬虫 爬虫就是通过编写程序模拟浏览器上网，然后去互联网上爬取/获取数据的过程。 爬虫的分类 - 通用爬虫：就是爬取互联网中的一整张页面内容。 - 聚焦爬虫：根据指定的需求爬取页面中指定的局部内容 - 增量式爬虫：用来检测网站数据更新的情况。只会爬取网站中最新更新出来的数据。 反爬虫：门户网站通 阅读全文