摘要: 这周学了python爬虫的知识点。 关于爬虫的合法性几乎每一个网站都有一个名为 robots.txt 的文档,当然也有部分网站没有设定 robots.txt。对于没有设定 robots.txt 的网站可以通过网络爬虫获取没有口令加密的数据,也就是该网站所有页面数据都可以爬取。如果网站有 robots 阅读全文
posted @ 2022-07-23 15:02 好(justice)…… 阅读(31) 评论(0) 推荐(0) 编辑