摘要: 今天尝试爬取新浪微博,但是爬取下来网页的源代码,以html形式打开却发现没有内容,如下图: 我查阅了一些资料,发现微博这种主流网页一般都是动态网页,都普遍采用了ajax加载数据,如果我用传统的爬虫post一个url或请求参过去,那么我接受相应的html代码会没有我想要的数据。 而抓取动态页面有两种常 阅读全文
posted @ 2023-03-10 14:55 鹤城 阅读(64) 评论(0) 推荐(0) 编辑