03 2014 档案
eclipse开发hadoop2.2.0程序
摘要:在 Eclipse 环境下可以方便地进行 Hadoop 并行程序的开发和调试。前提是安装hadoop-eclipse-plugin,利用这个 plugin, 可以在 Eclipse 中创建一个 Hadoop MapReduce 应用程序,并且提供了一些基于 MapReduce 框架的类开发的向导,可以打包成 JAR 文件,部署一个 Hadoop MapReduce 应用程序到一个 Hadoop 服务器(本地和远程均可),可以通过一个专门的视图 ( perspective ) 查看 Hadoop 服务器、Hadoop 分布式文件系统( DFS )和当前运行的任务的状态。但hadoop2.2.0未 阅读全文
posted @ 2014-03-28 13:10 顾文锦 阅读(581) 评论(0) 推荐(1) 编辑
hadoop2.2.0编译、安装和测试
摘要:搭建环境:单机64位CentOS6.5 、jdk1.6.0_45、Hadoop2.2.01、准备编译环境从http://www.apache.org/dyn/closer.cgi/hadoop/common/上下载的编译好的tar包是32位的,不能用,否则启动Hadoop时会警告不能加载本地库,导致nodemanager启动不了,必须自己编译Hadoop源码。在CentOS6.5环境下编译源代码之前,需进行以下准备工作:1.1 必要的包yum install svnyum install autoconfautomake libtool cmakeyum install ncurses-dev 阅读全文
posted @ 2014-03-26 12:15 顾文锦 阅读(517) 评论(0) 推荐(0) 编辑


点击右上角即可分享
微信分享提示