摘要: 1. 在google浏览器中输入maoyan.com, 点击榜单top100. 2.观察分页路由,构造分页url = 'http://maoyan.com/board/4?offset=' + str(offset) 3.卡发者选项,查看排行的电影信息,我们要爬取电影的排行(index), 图片的u 阅读全文
posted @ 2017-10-07 16:52 华之菜 阅读(253) 评论(0) 推荐(0) 编辑
摘要: 1. 打开google浏览器,输入www.toutiao.com, 搜索街拍。 2.打开开发者选项,network监看加载的xhr, 数据是ajax异步加载的,可以看到preview里面的data数据 3.下拉刷新查看加载的offset,每次加载20条数据,data是json数据,里面的articl 阅读全文
posted @ 2017-10-07 11:53 华之菜 阅读(2458) 评论(0) 推荐(0) 编辑