摘要:
request模块 介绍 可以模拟发送http请求,基于urlib2:内置库,不太好用,繁琐,封装出requests模块,应用非常广泛(公司,人) 安装 pip3 install requests 使用 # 1 request模块基本使用import requests# 发送http请求# 请求 阅读全文
摘要:
1.爬虫基础之前戏 2.爬虫之request模块 3.爬虫练习1 4.bs4的使用 5.如何搭建一个免费的代理池 6.爬虫练习2 7.爬虫练习3 8.爬虫练习4,5,6 9.数据入库(mysql) 阅读全文
摘要:
一. 爬虫介绍 1) 本质:模拟发送http请求(requests) 》解析返回数据(re,bs4,lxml,json) 》入库(redis,mysql,mongodb) #1、发起请求 使用http库向目标站点发起请求,即发送一个Request Request包含:请求头、请求体等 #2、获取响 阅读全文