摘要: #引入模块request,re,Beautiful,timefrom urllib import requestfrom bs4 import BeautifulSoupimport re,time,sys #引入一个URL地址url='https://www.zhihu.com/question/ 阅读全文
posted @ 2018-07-13 20:06 尔若风尘 阅读(124) 评论(0) 推荐(0) 编辑
摘要: BeautifulSoup是Python的一个库,最主要的功能就是从网页爬取我们需要的数据。BeautifulSoup将html解析为对象进行处理,全部页面转变为字典或者数组,相对于正则表达式的方式,可以大大简化处理过程。 0x01 安装 建议安装BeautifulSoup 4版本 利用pip进行安 阅读全文
posted @ 2018-07-13 15:01 尔若风尘 阅读(5378) 评论(0) 推荐(0) 编辑
摘要: 1 导入模块 import requests 2 直观感受一下发送请求的简洁 r = requests.get('your url') r = requests.post('your url')#put delete head options方法也是这种用法 3 为url传递参数 url_param 阅读全文
posted @ 2018-07-13 14:57 尔若风尘 阅读(350) 评论(0) 推荐(0) 编辑