万物皆可爬系列查看翻页翻到最后是什么
山的尽头是什么?山的尽头还是山。
一直很好奇,某个网站如果一直往下翻下去会出现什么?
效果如下
思路:
1.打开网页->2. 往下滚动->3. 等待加载按钮出现->4.点击。继续 234循环
源码
https://github.com/lineuman/gugu/blob/master/shizhan/02/juzikong.py
技术本无罪,明镜亦非台。既然可以翻页,就能爬取全部数据。
山的尽头是什么?山的尽头还是山。
一直很好奇,某个网站如果一直往下翻下去会出现什么?
效果如下
思路:
1.打开网页->2. 往下滚动->3. 等待加载按钮出现->4.点击。继续 234循环
源码
https://github.com/lineuman/gugu/blob/master/shizhan/02/juzikong.py
技术本无罪,明镜亦非台。既然可以翻页,就能爬取全部数据。