postman的post方法中Body项里,none,form-data,x-www-form-urlencoded,raw,binary,GraphQL有什么不同
摘要:目录1. None2. form-data3. x-www-form-urlencoded4. raw5. binary6. GraphQL总结 在 Postman 中,使用 POST 方式时,Body 项中有几种不同的数据传输方式可供选择,它们之间的主要区别在于数据的格式和编码方式。以下是每种类型
阅读全文
爬虫基础之urllib库
摘要:[TOC] urllib库 urllib库是Python中一个最基本的网络请求库。可以模拟浏览器的行为,向指定的服务器发送一个请求,并可以保存服务器返回的数据 urlopen函数 在Python3的urllib库中,所有和网络请求相关的方法,都被集到 urllib.request 模块下面了,先来看
阅读全文
爬虫基础之urllib库
摘要:categories: 爬虫 tags: urlopen urlretrieve urlencode parse_qs urlparse urlsplit [TOC] urllib库 urllib库是Python中一个最基本的网络请求库。可以模拟浏览器的行为,向指定的服务器发送一个请求,并可以保存服
阅读全文
爬虫基础之Request类
摘要:categories: 爬虫 tags: Request 模拟请求拉钩网 [TOC] request.Request类 如果想要在请求的时候增加一些请求头,用request.Request 模拟请求拉钩网站
阅读全文
爬虫基础之HTTP协议和Chrome抓包工具
摘要:categories: 爬虫 tags: URL详解 [TOC] 什么是HTTP协议和HTTPS协议 HTTP协议:全称是HyperText Transfer Protocol,中文意思是超文本传输协议,是一种发布和接收HTML页面的方法。服务器端口是80 HTTPS协议:是HTTP协议的加密版本,
阅读全文
爬虫基础
摘要:categories: 爬虫 [TOC] 爬虫前奏 爬虫的实际例子 1. 搜索引擎(百度、谷歌、360搜索) 2. 伯乐在线 3. 惠惠助手 4. 数据分析与研究(数据冰山知乎专栏) 5. 抢票软件 什么是网络爬虫 1. 通俗理解:爬虫是模拟人类请求网站行为的程序,可以自动请求网页、并将数据抓取下来
阅读全文