摘要： 一、规划（一）硬件资源10.171.29.191 master10.173.54.84 slave110.171.114.223 slave2（二）基本资料用户： jediael目录：/opt/jediael/二、环境配置（一）统一用户名密码，并为jediael赋予执行所有命令的权限#passwd#... 阅读全文

摘要： 1、下载rpm文件并安装rpm -ivh jdk-7u51-linux-x64.rpm2、修改/etc/profile文件，增加以下配置export JAVA_HOME=/usr/java/jdk1.7.0_51export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JA... 阅读全文

摘要： 更详细的内容请参考：http://www.w3school.com.cn/tags/tag_a.aspHTML中的代码如下：可以通过以下方式来改变其默认的显示样式：.news_title { font: normal 18px/28px "Microsoft YaHei"; font-s... 阅读全文

摘要： 一、各个主要类之间的关系SolrIndexerJob extends IndexerJob1、IndexerJob：主要完成2、SolrIndexerJob：主要完成3、IndexUtil：主要只有一个方法public NutchDocument index(String key, WebPage ... 阅读全文

摘要： 小结：（1）在nutch中，一般通过ToolRunner来运行hadoop job，此方法可以方便的通过ToolRunner.run(Configuration conf,Tool tool,String[] args)来加载配置文件。（2）conf参数会通过NutchConfiguration.c... 阅读全文

摘要： 转自：http://blog.csdn.net/carefree31441/article/details/3998553UUID含义是通用唯一识别码 (Universally Unique Identifier)，这 是一个软件建构的标准，也是被开源软件基金会 (Open Software Fou... 阅读全文

摘要： 为了简化命令行方式运行作业，Hadoop自带了一些辅助类。GenericOptionsParser是一个类，用来解释常用的Hadoop命令行选项，并根据需要，为Configuration对象设置相应的取值。通常不直接使用GenericOptionsParser，更方便的方式是：实现Tool接口，... 阅读全文

摘要： 以下程序在hadoop1.2.1上测试成功。本例先将源代码呈现，然后详细说明执行步骤，最后对源代码及执行过程进行分析。一、源代码package org.jediael.hadoopdemo.wordcount;import java.io.IOException;import java.util.S... 阅读全文

摘要： 部分内容参考：http://www.linuxqq.net/archives/964.html http://slaytanic.blog.51cto.com/2057708/1100974/hadoop的重要配置文件有以下几个： 在1.2.1版本中，core-default.xml有73个属性，... 阅读全文

摘要： nutch-site.xml在nutch2.2.1中，有两份配置文件：nutch-default.xml与nutch-site.xml。其中前者是nutch自带的默认属性，一般情况下不要修改。如果需要修改默认属性，可以在nutch-site.xml中增加一个同名的属性，并修改其值。nutch-sit... 阅读全文