Fork me on GitHub
随笔 - 234  文章 - 49 评论 - 0 阅读 - 13万
< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

随笔分类 -  爬虫

postman的post方法中Body项里,none,form-data,x-www-form-urlencoded,raw,binary,GraphQL有什么不同
摘要:目录1. None2. form-data3. x-www-form-urlencoded4. raw5. binary6. GraphQL总结 在 Postman 中,使用 POST 方式时,Body 项中有几种不同的数据传输方式可供选择,它们之间的主要区别在于数据的格式和编码方式。以下是每种类型 阅读全文
posted @ 2024-10-08 14:30 anyux 编辑
爬虫基础之urllib库
摘要:[TOC] urllib库 urllib库是Python中一个最基本的网络请求库。可以模拟浏览器的行为,向指定的服务器发送一个请求,并可以保存服务器返回的数据 urlopen函数 在Python3的urllib库中,所有和网络请求相关的方法,都被集到 urllib.request 模块下面了,先来看 阅读全文
posted @ 2020-01-16 20:18 anyux 编辑
爬虫基础之urllib库
摘要:categories: 爬虫 tags: urlopen urlretrieve urlencode parse_qs urlparse urlsplit [TOC] urllib库 urllib库是Python中一个最基本的网络请求库。可以模拟浏览器的行为,向指定的服务器发送一个请求,并可以保存服 阅读全文
posted @ 2020-01-16 20:16 anyux 编辑
爬虫基础之Request类
摘要:categories: 爬虫 tags: Request 模拟请求拉钩网 [TOC] request.Request类 如果想要在请求的时候增加一些请求头,用request.Request 模拟请求拉钩网站 阅读全文
posted @ 2020-01-16 20:12 anyux 编辑
爬虫基础之HTTP协议和Chrome抓包工具
摘要:categories: 爬虫 tags: URL详解 [TOC] 什么是HTTP协议和HTTPS协议 HTTP协议:全称是HyperText Transfer Protocol,中文意思是超文本传输协议,是一种发布和接收HTML页面的方法。服务器端口是80 HTTPS协议:是HTTP协议的加密版本, 阅读全文
posted @ 2020-01-16 20:10 anyux 编辑
爬虫基础
摘要:categories: 爬虫 [TOC] 爬虫前奏 爬虫的实际例子 1. 搜索引擎(百度、谷歌、360搜索) 2. 伯乐在线 3. 惠惠助手 4. 数据分析与研究(数据冰山知乎专栏) 5. 抢票软件 什么是网络爬虫 1. 通俗理解:爬虫是模拟人类请求网站行为的程序,可以自动请求网页、并将数据抓取下来 阅读全文
posted @ 2020-01-16 20:06 anyux 编辑

点击右上角即可分享
微信分享提示