摘要: 介绍:大而全的爬虫组件 使用Anaconda conda install -c conda-forge scrapy 一、安装: windows 1.下载 https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted 耐心等待网页刷新 pip3 instal 阅读全文
posted @ 2019-10-22 22:47 市丸银 阅读(195) 评论(0) 推荐(0) 编辑
摘要: requests:伪造浏览器请求 请求 1.get requests.get( url='', params={ 'k1': ''v1, 'k2': 'v2' } ) 即 url?k1=k2&k2=v2 2.post requests.post( url='', # data 提交的数据 data={key: value}, # 请求头 headeres={}, # cookies值需要从get请 阅读全文
posted @ 2019-10-22 15:28 市丸银 阅读(159) 评论(0) 推荐(0) 编辑