lweiser

导航

2019年6月16日 #

python爬虫实践——爬取“梨视频”

摘要: 一、爬虫的基本过程: 1、发送请求(请求库:request,selenium) 2、获取响应数据()服务器返回 3、解析并提取数据(解析库:re,BeautifulSoup,Xpath) 4、保存数据(储存库)MongoDB 二、爬取“梨视频”中的某一个视频 三、正则表达式的使用 四、爬取整个“梨视 阅读全文

posted @ 2019-06-16 22:50 lweiser 阅读(4157) 评论(0) 推荐(0) 编辑

python爬虫之requests的使用

摘要: 一、爬虫基本知识 二、requests库的安装 1、在DOS中输入“pip3 install requests”进行安装 2、在pycharm中进行安装 三、基于HTTP协议的requests的请求机制 1、http协议:(以请求百度为例) (1)请求url: https://www.baidu.c 阅读全文

posted @ 2019-06-16 21:19 lweiser 阅读(29269) 评论(0) 推荐(0) 编辑