摘要: 什么是Session和Cookie? Session和Cookie是用户保持HTTP连接状态的技术。在网页或APP等应用中基本都会使用到。在写爬虫的时候,也经常会涉及需要携带Cookie应对一般的反爬,接下来会对Session和Cookie的基本原理做简要讲解。 Session的基本原理 Cooki 阅读全文
posted @ 2021-09-17 20:19 陆陆无为而治者 阅读(270) 评论(0) 推荐(0) 编辑
摘要: GET重点从服务器上获取资源,POST重点在向服务器发送数据。 GET传输数据通过URL请求,以field(字段)= value的形式,放置在URL后,并用“?”连接,多个请求数据用“&”连接。例如“http://127.0.0.1/Test?name=admin&password=admin”,这 阅读全文
posted @ 2021-09-17 19:27 陆陆无为而治者 阅读(64) 评论(0) 推荐(0) 编辑
摘要: 接下来,要介绍HTTP的基本原理,介绍为什么在浏览器输入URL就可以看到网页的内容。孙子曰:“”知己知彼,百战不殆。”因此,要爬取网页,必须要了解一下要爬取的对象的基本原理——HTTP的基本原理(虽然,我默认大多数人都会了,但是能够有条理的把它说出来,是不是可以增加吹牛的资本呢?)。 HTTP(Hy 阅读全文
posted @ 2021-09-17 13:01 陆陆无为而治者 阅读(402) 评论(0) 推荐(0) 编辑