摘要: 以WordCount程序为例,假设有三台DataNode,每台DataNode有不一样的数据,如下表格所示:DataNode1DataNode2DataNode3who are you arewho am i arewho is he am经过Map函数后,生成以下键值对:DataNode1Data... 阅读全文
posted @ 2014-11-06 10:16 无措 阅读(1817) 评论(3) 推荐(0) 编辑
摘要: package javase.jdbc; import java.sql.Connection;import java.sql.DriverManager;import java.sql.SQLException;import java.sql.ResultSet;import java.sql.S... 阅读全文
posted @ 2014-11-05 17:43 无措 阅读(341) 评论(0) 推荐(0) 编辑
摘要: import java.sql.Connection;import java.sql.DriverManager;import java.sql.SQLException;import java.sql.ResultSet;import java.sql.Statement;public class... 阅读全文
posted @ 2014-11-05 17:37 无措 阅读(8524) 评论(0) 推荐(0) 编辑
摘要: 运行wordcount程序一直停在map 100% reduce 0%,input文件夹的内容:其中:f1.txt中的内容为:hello hadoopf2.txt中的内容为:hello hadoopf3.txt中的内容为:hello world解决方法:在/etc/hosts中增加以下红色一行,其中... 阅读全文
posted @ 2014-11-05 17:34 无措 阅读(2330) 评论(1) 推荐(0) 编辑
摘要: 今天在hadoop项目中出现以下报错:java.lang.IllegalArgumentException: Wrong FS: hdfs://......,expected: file:///.......解决方法:需要把hadoop集群上的core-site.xml和hdfs-site.xml放... 阅读全文
posted @ 2014-11-05 17:31 无措 阅读(4780) 评论(0) 推荐(0) 编辑
摘要: 解压java安装包到指定目录下,这里为/data/software/java/,然后在/etc/profile添加以下内容:JAVA_HOME =/data/software/java/jdk1.7.0_40PATH = $JAVA_HOME / bin:$PATHCLASSPATH = .:$JA... 阅读全文
posted @ 2014-11-05 17:30 无措 阅读(112) 评论(0) 推荐(0) 编辑
摘要: Redhat Enterprise Linux中自带了jdk的旧版本,往往需要卸载,卸载步骤如下:在终端输入:yum remove java终端显示:Is this ok[y/N]:输入y,按回车,终端显示Complete!此时jdk旧版本已经被卸载了。 阅读全文
posted @ 2014-11-05 17:28 无措 阅读(313) 评论(0) 推荐(0) 编辑
摘要: 1:软件环境准备1.1Hadoop:我们使用hadoop Release 1.2.1(stable)版本,下载链接:http://mirrors.ustc.edu.cn/apache/hadoop/common/hadoop-1.2.1/我们选择hadoop-1.2.1-bin.tar.gz文件下载... 阅读全文
posted @ 2014-11-04 17:19 无措 阅读(7527) 评论(0) 推荐(3) 编辑
摘要: 配置文件:User类:packagecom.colorlight.springscope;publicclassUser {privateintid;privateStringname;privateStringpassword;publicUser(){ System.out.println("创... 阅读全文
posted @ 2014-11-04 15:38 无措 阅读(1018) 评论(0) 推荐(0) 编辑
摘要: 配置文件spring.xml:接口UserDao:packagecom.colorlight.spring;publicinterfaceUserDao {voidprintInfo();}实现类UserDaoImpl:packagecom.colorlight.spring;publicclass... 阅读全文
posted @ 2014-11-04 15:31 无措 阅读(582) 评论(0) 推荐(0) 编辑