Windows 下配置 Eclipse 连接 Hadoop 开发环境
摘要:上一篇,详细介绍了用三台主机搭建 Hadoop 集群环境,有了环境,接下来就是进行Hadoop MapReduce 开发调试工作。而在windows中进行开发,对于大多数人来说,还是比较舒适的。这篇随笔,就是在上篇搭好环境的基础上,进一步介绍如何在Windows环境下用Eclipse连接Hadoop集群,并给出了Hadoop MapReduce程序的类HelloWorld程序:WorldCount。
阅读全文
posted @
2012-05-29 00:15
石头儿
阅读(28959)
推荐(9) 编辑
Hadoop 三台主机 集群搭建 详解
摘要:自从换了工作,并进入北航云计算科学与技术在职研究生高端班,工作和学习的双重需要,开始学习hadoop,从0开始,逐渐入门,期间遇到很多错误,走了很多弯路,请教很多高手,查了很多资料,终于步入正轨,并开始进入源码学习轨道。在同学的强烈要求下,也为了自己以后查阅及记录学习过程,写下这边hadoop step by step 文章,希望对新手有用。本文内容包含一下部分:
-部署环境
-节点安排及网络拓扑
-配置步骤
一、网络配置
二、安装jdk
三、建立ssh互信
四、配置Hadoop
五、运行Hadoop 自带example中求PI值小程序
阅读全文
posted @
2012-05-21 01:07
石头儿
阅读(21014)
推荐(6) 编辑
[学习笔记]Hadoop 配置调试错误收集
摘要:日常学习工作调试过程中所遇到的所有有关hadoop的错误记录
阅读全文
posted @
2012-05-12 22:50
石头儿
阅读(2270)
推荐(0) 编辑
VMware Redhat网络配置
摘要:原本是学习Hadoop的,但Hadoop是多台主机进行交互的,交互就要涉及到网络配置。以前一直用Ubuntu,但看Hadoop学习还是力荐Redhat,所以这次就小练Redhat,本以为Ubuntu和Redhat网络配置差不多,但是用了才发现,还是有很多不同的,记录下学习路线和相关知识,供以后查阅及后来者参考,少走弯路。
阅读全文
posted @
2012-05-05 15:13
石头儿
阅读(11612)
推荐(2) 编辑