会员
周边
众包
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
正态分个布
博客园
首页
新随笔
联系
订阅
管理
2018年7月21日
python3 requests + BeautifulSoup 爬取阳光网投诉贴详情实例代码
摘要: 用到了requests、BeautifulSoup、urllib等,具体代码如下。 在编代码的时候,有一些小细节的处理不够熟练,比如文件的读写。下面再搞一搞。 爬虫爬取了前30个页面保存到本地文件中,其实可以考虑用多线程,线程池的方法去分别爬取每一个主页面,这样可能效率会更高一些。至于多线程的部分,
阅读全文
posted @ 2018-07-21 14:13 正态分个布
阅读(630)
评论(0)
推荐(0)
编辑
公告