会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
rw_rongwei
博客园
首页
新随笔
联系
订阅
管理
2016年6月10日
通过Scrapy抓取QQ空间
摘要: 毕业设计题目就是用Scrapy抓取QQ空间的数据,最近毕业设计弄完了,来总结以下: 首先是模拟登录的问题: 由于Tencent对模拟登录比较讨厌,各个防备,而本人能力有限,所以做的最简单的,手动登录后,获得Cookie信息,然后携带访问。 其次是数据接口: 通过对QQ空间的网页分析,数据主要是通过Json的形式返回。选择了两个数据接口进行数据抓取 每个QQ的详细信息接口...
阅读全文
posted @ 2016-06-10 17:38 rw_rongwei
阅读(1538)
评论(3)
推荐(0)
编辑
公告