为文本分类实验爬取数据集,要求一百万,分类>10类。

参考链接:http://litianyi.cc/technology/2015/12/01/text-classification-1/

文档:https://scrapy-chs.readthedocs.io/zh_CN/0.24/intro/tutorial.html

最基础的爬取,实验新浪科技大概3k+,腾讯科技5k+,一财5w+,就爬不动了。

posted on 2018-11-03 21:42  小小八  阅读(448)  评论(0编辑  收藏  举报