随笔分类 -  爬虫

在链家网上爬取房价数据
摘要:下面内容包括: 如何使用高德API获取线路数据,无需代码 如何将获取下来的线路数据处理成geodataframe 线路数据获取 网址(高德开放平台): https://lbs.amap.com/demo/javascript-api/example/bus-info/search-bus-route 阅读全文
posted @ 2024-01-07 17:32 sheyueyu 阅读(506) 评论(2) 推荐(0) 编辑
摘要:高德地图驾车路径规划API,获取两地点之间的驾车里程和时间 import pandas as pd import requests import json def get_dis_tm(origin, destination): url = 'https://restapi.amap.com/v3/ 阅读全文
posted @ 2022-10-22 16:54 sheyueyu 阅读(500) 评论(1) 推荐(0) 编辑
摘要:1.确定数据所在的url链接地址(分析网页性质)静态网页/动态网页 import requests import csv import parsel import random import pandas as pd """ User-Agent,用来模拟浏览器,爬虫本质上是一个下载器,需要通过加入 阅读全文
posted @ 2022-10-22 16:44 sheyueyu 阅读(55) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示