2015年9月7日
大数据之nutch
摘要： 一、nutch简介 nutch是大名鼎鼎的Doug Cutting发起的爬虫项目，nutch孵化了现在大数据处理框架Hadoop。在nutch V 0.8.0 版本之前，Hadoop是nutch的一部分，从nutch V0.8.0开始，HDFS和MapReduce从nutch中剥离出成为Hadoop。v0.8.0之后，nutch就完全构建在Hadoop的基础之上了。 Nutch是一个开源的网络爬... 阅读全文
posted @ 2015-09-07 20:19 农民阿姨 阅读(712) 评论(0) 推荐(0) 编辑