一、爬虫的基础简介
一、爬虫的基础简介
1. 什么是爬虫?
- 1.通过编写程序,模拟浏览器上网,然后让其去还联网上抓取数据
2. 爬虫的价值是什么
- 1.实际应用
- 2.就业
3.http协议
一、概念
- 服务器和客户端进行数据交互的一种形式。
二、常用请求头信息
- User-agent:请求载体的身份标识
- Connection:请求完毕后,是断开连接还是保存连接
三、常用响应头信息
- Content-Type:服务器响应为客户端的数据类型
4.https协议
- 表示安全的超文本传输协议。
1.加密方式
-
对称密钥加密: 双方共同持有这个密钥,发送方用这个密钥按照指定的算法将数据加密,再发出去;接收方用这个密钥将接收到的数据解密,以得到真实的数据含义。由于双方都持有这个密钥,而且内容相同,所以叫对称密钥
-
非对称密钥加密:这种加密方式的密钥是一对,发送方用其中的一把钥匙将数据加密,再发出去;接收方用这对密钥的另一把钥匙将数据解密,以得到真实的数据含义。发送方持有密钥中的一把钥匙,接收方持有另外一把。接收方持有的钥匙叫 私钥, 而接收方持有的这把钥匙叫公钥 。两把钥匙不一样,所以叫做非对称密钥加密,也叫做公开密钥算法。
-
证书密钥加密