Title
摘要: request模块 介绍 可以模拟发送http请求,基于urlib2:内置库,不太好用,繁琐,封装出requests模块,应用非常广泛(公司,人) 安装 pip3 install requests 使用 # 1 request模块基本使用​import requests​# 发送http请求# 请求 阅读全文
posted @ 2020-04-08 01:31 Mr江 阅读(155) 评论(0) 推荐(0) 编辑
摘要: 1.爬虫基础之前戏 2.爬虫之request模块 3.爬虫练习1 4.bs4的使用 5.如何搭建一个免费的代理池 6.爬虫练习2 7.爬虫练习3 8.爬虫练习4,5,6 9.数据入库(mysql) 阅读全文
posted @ 2020-04-08 01:29 Mr江 阅读(140) 评论(0) 推荐(0) 编辑
摘要: 一. 爬虫介绍 1) 本质:模拟发送http请求(requests) 》解析返回数据(re,bs4,lxml,json) 》入库(redis,mysql,mongodb) #1、发起请求 使用http库向目标站点发起请求,即发送一个Request Request包含:请求头、请求体等​ #2、获取响 阅读全文
posted @ 2020-04-08 01:28 Mr江 阅读(64) 评论(0) 推荐(0) 编辑