随笔分类 - 爬虫
摘要:相信各位学习爬虫的老铁们一定看过崔大佬的爬虫教学。在第六章利用Ajax爬取今日头条街拍图片这部分,由于网站已变更,会发现书中具体代码无法执行。本人作为爬虫新手,用了2小时时间自行摸索该部分,并对相应内容进行调整,最终【成功爬取】,在这里跟大家分享一下我踏过的各种大坑。 首先模块导入 import r
阅读全文
摘要:利用百度POI小插件爬取一些POI数据,然后存成txt,再用python读取,编写成一个json形式(列表字典) 0 使用os.chdir确定文件路径 1 使用 open 打开文件。 1 字段:【名称】、【经纬坐标】、【地址】。 2 使用st1 = line.split(':'),用“:”分隔,将数
阅读全文