该文被密码保护。 阅读全文
posted @ 2019-06-04 23:16 程序杰杰 阅读(15) 评论(0) 推荐(0) 编辑
摘要: 京东的rotobs协议,网址: Robots协议的遵守方式~~~~ 1.京东商品页面的爬取 2.亚马逊商品页面的爬取【改变头部User-Agent为浏览器(伪装自己)】 3.百度360搜索关键词提交 直接使用params 4.网络图片的爬取和存储[这个只是一张图片的] 附上自己按照小甲鱼方法写的爬取 阅读全文
posted @ 2019-06-04 14:29 程序杰杰 阅读(979) 评论(0) 推荐(1) 编辑
摘要: requests库 1安装 2.使用 3.其他方法 *requests的get方法 他返回和我使用urllib.request构建走的: rq=urllib.request.Request(url[,data][,header]) response=urllib.request.urlopen(rq 阅读全文
posted @ 2019-06-04 12:20 程序杰杰 阅读(154) 评论(0) 推荐(0) 编辑