2019年4月12日

【大数据】爬取全部的校园新闻

摘要: 1.从新闻url获取新闻详情: 字典,anews 2.从列表页的url获取新闻url:列表append(字典) alist 3.生成所页列表页的url并获取全部新闻 :列表extend(列表) allnews *每个同学爬学号尾数开始的10个列表页 4.设置合理的爬取间隔 import time i 阅读全文

posted @ 2019-04-12 21:52 WAN*Y 阅读(307) 评论(0) 推荐(0) 编辑

导航