2019年8月2日
scrapy常用设置和注意点！！！！
摘要： HTTPERROR_ALLOWED_CODES = [405] //这一条是忽略405错误退出进程，有可能跳到405页面，在parse注意判断，重新请求页面 爬虫里的设置 response.url //这一条在parse里是返回上一个请求链接 meta = {'dont_redirect': Tru 阅读全文
posted @ 2019-08-02 11:09 火鸟网络 阅读(377) 评论(0) 推荐(0) 编辑