随笔分类 - 爬虫从入门到入土
发表于 2023-03-17 20:01阅读：365评论：0推荐：0
摘要：bs4详解，css选择器，selenium基本使用，无界面浏览器，selenium其它用法 bs4详解 ''' bs4:全称 beautifulsoup4，从HTML或者HTML文件中提取数据的Python库，用来解析爬取回来的xml 安装：pip install beautifulsoup4 pi
阅读全文 »
发表于 2023-03-16 21:17阅读：106评论：0推荐：0
摘要：requests高级用法，代理池搭建， 爬取某视频网站，爬取新闻 requests高级用法 1.0 解析json '''发送http请求，返回的数据会有xml格式，也有json格式''' import requests data = { 'cname': '', 'pid': '', 'keywor
阅读全文 »
发表于 2023-03-15 16:57阅读：422评论：0推荐：0
摘要：爬虫介绍，request模块介绍，request发送get请求，request携带参数，url编码解码，携带请求头，发送post请求,携带数据，自动登录，携带cookie的两种方式，requests.session的使用，补充post请求携带数据编码格式， 响应Response对象 爬虫介绍 """
阅读全文 »
