配置MapReduce时遇到的问题记录
1、左边栏的Project Explorer里一直不出现DFS Locations.
发现在把hadoop-eclipse-plugin-2.6.0.jar放到eclipse下的pluins文件夹下并且eclipse -clean之后依旧不显示,后来找到问题所在。
在Linux虚拟机里换了新的Eclipse,又重新配置MapReduce。
这次再把hadoop-eclipse-plugin-2.6.0.jar放到eclipse下的pluins文件夹下并且eclipse -clean之后,DFS Locations出现了。
究其原因是因为:eclipse的众多版本里有的不适合配置Map/Reduce,个别版本功能简单方便实用但也正是因此导致不好配置。
2、配置:
在window-》preferences-》Hadoop Map/Reduce下配置hadoop路径:
配置完成,则可以在eclipse的开发模式里看到这个小象图标的Map/Reduce模式:
在出现的服务右击后的页面里,按照默认的常规和自己本地的配置文件的路径和内容填写:
3、在配置好MapReduce的路径和常规之后,将端口与hadoop配置的一致,之后能正常显示hdfs下的文件了。
4、记录一下dfs location连接的错误:
这个是连接问题,配置里出现了问题(没有把那些参数的值和自己的hadoop配置时修改的值保持一致)
还有一个是hadoop版本和hadoop-eclipse-plugin-2.6.0.jar这个插件的版本不匹配,也会报一个错。
__EOF__

本文作者:我命倾尘
本文链接:https://www.cnblogs.com/guobin-/p/9979458.html
关于博主:评论和私信会在第一时间回复。或者直接私信我。
版权声明:本博客所有文章除特别声明外,均采用 BY-NC-SA 许可协议。转载请注明出处!
声援博主:如果您觉得文章对您有帮助,可以点击文章右下角【推荐】一下。您的鼓励是博主的最大动力!
本文链接:https://www.cnblogs.com/guobin-/p/9979458.html
关于博主:评论和私信会在第一时间回复。或者直接私信我。
版权声明:本博客所有文章除特别声明外,均采用 BY-NC-SA 许可协议。转载请注明出处!
声援博主:如果您觉得文章对您有帮助,可以点击文章右下角【推荐】一下。您的鼓励是博主的最大动力!
分类:
问题处理
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 如何编写易于单元测试的代码
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 周边上新:园子的第一款马克杯温暖上架
· Open-Sora 2.0 重磅开源!
· 分享 3 个 .NET 开源的文件压缩处理库,助力快速实现文件压缩解压功能!
· Ollama——大语言模型本地部署的极速利器
· DeepSeek如何颠覆传统软件测试?测试工程师会被淘汰吗?