随笔分类 - 爬虫
在链家网上爬取房价数据
摘要:下面内容包括: 如何使用高德API获取线路数据,无需代码 如何将获取下来的线路数据处理成geodataframe 线路数据获取 网址(高德开放平台): https://lbs.amap.com/demo/javascript-api/example/bus-info/search-bus-route
阅读全文
摘要:高德地图驾车路径规划API,获取两地点之间的驾车里程和时间 import pandas as pd import requests import json def get_dis_tm(origin, destination): url = 'https://restapi.amap.com/v3/
阅读全文
摘要:1.确定数据所在的url链接地址(分析网页性质)静态网页/动态网页 import requests import csv import parsel import random import pandas as pd """ User-Agent,用来模拟浏览器,爬虫本质上是一个下载器,需要通过加入
阅读全文