摘要: 依然是爬取五等分的花嫁漫画。在爬取时发现需要获得的某个数据只能在浏览器正常打开后才能获取,否则获得的是空数据。 折腾了cookie也没有用。想啊想,看啊看,试啊试,最终还是没有解决问题 又去参考了前辈的代码,加了header中的referer终于解决了问题。 现在还是不明白为什么。先贴个关于refe 阅读全文
posted @ 2019-05-03 17:03 roadwide 阅读(498) 评论(1) 推荐(1) 编辑
摘要: 起因是想爬五等分的花嫁的漫画。这是其中的一个坑 先上代码 有两个坑。 一是使用get方法带参数请求时,是params=参数字典,而不是data=。data=是post方法的参数。只怪我学艺不精,只能在坑里摸爬滚打了 二是对参数的编码,对于上面的参数需要编码的就是_dt,这个是时间的参数需要编码,编码 阅读全文
posted @ 2019-05-03 13:17 roadwide 阅读(44217) 评论(7) 推荐(3) 编辑