摘要: Scraoy入门实例一 Scrapy介绍与安装&PyCharm的安装&项目实战 一、Scrapy的安装 1.Scrapy介绍 Scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架。可以应用在包括数据挖掘,信息处理或存储历史数据等一系列的程序中。其最初是为了页面抓取 (更确切来说,网络抓 阅读全文
posted @ 2020-11-01 23:29 恶魔岛 阅读(13900) 评论(0) 推荐(0) 编辑
摘要: 本博客参考该链接安装,以下为个人安装的过程以及遇到的问题,仅供参考。 http://dblab.xmu.edu.cn/blog/2441-2/ 要在Ubuntu虚拟机中安装Hadoop的前提是安装了virtualBox和Ubuntu18.04(我正在使用的)或其他版本,如未在电脑中安装虚拟机,请参考 阅读全文
posted @ 2020-11-01 19:43 恶魔岛 阅读(903) 评论(0) 推荐(0) 编辑