摘要：
爬取学校网站的链接 import requests import re url = 'http://www.whut.edu.cn/' r = requests.get(url) r.encoding = 'utf-8' text = r.text links = re.findall('(http 阅读全文
摘要：
正则表达式符号与方法一常用符号 字符 含义 . 匹配任意字符 * 匹配一个字符无限次或零次 ? 匹配一个字符0次或一次 .* 贪心算法 .*? 非贪心算法 () 括号内的结果作为反回值 常用方法 几种符号的demo demo1: code = 'huasdakxxIxxbcjkxxlovexxsbs 阅读全文
摘要：
某些网站会识别python爬虫程序并阻断,通过构造User_Agent可以抵抗某些反爬虫机制 用fake-useragent这个库就能很好的实现 pycharm中安装步骤 产生随机的User-Agent 只需一行代码 from fake_useragent import UserAgent ua = 阅读全文
摘要：
在pycharm中安装requests库的一种方法 首先找到设置 搜索然后安装,蓝色代表已经安装 requests库中的get请求 与HTTP协议相对应,requests库也有七种请求方式. 获取url requests.get(url.params,kwargs) r = requests.get 阅读全文