Hadoop develop

博学笃志,切问近思,此八字,是收放心的工夫。 神闲气静,智深勇沉,此八字,是干大事的本领。

  博客园 :: 首页 :: 博问 :: 闪存 :: 新随笔 :: 联系 :: 订阅 订阅 :: 管理 ::
  190 随笔 :: 10 文章 :: 199 评论 :: 45万 阅读

一、引言:

  最近在做一个城商行项目的POC测试it版本,涉及到编译Linux64bti的源码和开发插件使用,作为笔记分享给大家。

二、插件编译

  Hadoop2x版本的Eclipse插件已经单独抽取成独立的开源项目,区别于之前版本直接集成到Hadoop1.x版本的模式,需要单独下载,下载网址:
  https://github.com/winghc/hadoop2x-eclipse-plugin

2.1 源码编译

复制代码
 1 hadoop2x-eclipse-plugin
 2 =======================
 3 
 4 eclipse plugin for hadoop 2.2.0
 5  
 6 
 7 How to build
 8 ----------------------------------------
 9 
10   $cd src/contrib/eclipse-plugin 
11 
12   $ant jar -Dversion=2.2.0 -Declipse.home=/opt/eclipse -Dhadoop.home=/usr/share/hadoop
13 
14 final jar will be genrated at directory 
15 
16   $root/build/contrib/eclipse-plugin/hadoop-eclipse-plugin-2.2.0.jar
17 
18 options required
19 --------------------------------------
20   eclipse.home: path of eclipse home 
21 
22   hadoop.home: path of hadoop 2.x home
23  
24 
25 How to debug
26 --------------------------------------
27   start eclipse with debug parameter:  
28 
29     /opt/eclipse/eclipse -clean -consolelog -debug
复制代码

  插件源码提供编译说明,只需要更具自己的实际情况,更改eclilpse.home和Hadoop.home的配置目录和安装必备的编译环境即可。

2.2 配置说明

  拷贝build/contrib/eclipse-plugin/hadoop-eclipse-plugin-2.2.0.jar文件到eclipse/plugins目录,启动eclipse即可发现

三、插件配置

启动插件后,需要根据core-site.xml配置插件信息,配置参数如下图所示:

需要配置的内容主要是IP地址和端口,更详细的配置可以根据自己配置文件进行配置。

posted on   张子良  阅读(1239)  评论(0编辑  收藏  举报
编辑推荐:
· 如何编写易于单元测试的代码
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
阅读排行:
· 地球OL攻略 —— 某应届生求职总结
· 周边上新:园子的第一款马克杯温暖上架
· Open-Sora 2.0 重磅开源!
· 提示词工程——AI应用必不可少的技术
· .NET周刊【3月第1期 2025-03-02】
历史上的今天:
2013-08-23 知识点查缺补漏贴01-进程间通讯之mmap文件共享
点击右上角即可分享
微信分享提示