【大数据】Windows7、Hadoop2.7.6
一、Java配置
1、完整路径不能有空格:C:\jdk1.8.0_101
2、配置环境变量:JAVA_HOME
二、Hadoop配置
1、完整路径不能有空格:F:\0002_BigData\Soft\hadoop-2.7.6
2、创建文件夹:data、name、tmp
3、下载winutil,拷贝至:F:\0002_BigData\Soft\hadoop-2.7.6\bin,此处下载Windows相关配置包:https://download.csdn.net/download/defineconst/11217649
4、配置:hadoop-env.cmd
5、配置:core-site.xml
6、配置:mapred-site.xml
7、配置:hdfs-site.xml
8、配置:yarn-site.xml
9、进入bin,初始化环境
10、进入sbin,启动Hadoop
11、验证
YARN管理界面:http://localhost:8088
HDFS管理界面:http://localhost:50070
12、文件操作
三、参考资料
https://blog.csdn.net/taogumo/article/details/80693292
https://yq.aliyun.com/articles/506632
https://blog.csdn.net/zhongjunlang/article/details/80812669
https://www.cnblogs.com/yjmyzz/p/how-to-remote-debug-hadoop-with-eclipse-and-intellij-idea.html
博客地址: http://www.cnblogs.com/defineconst/
博客版权: 本文以学习、研究和分享为主,欢迎转载和各类爬虫,但必须在文章页面明显位置给出原文链接。 如果文中有不妥或者错误的地方还望高手的您指出,以免误人子弟。如果您有更好的建议,不如留言一起讨论,共同进步! 再次感谢您耐心的读完本篇文章。
博客版权: 本文以学习、研究和分享为主,欢迎转载和各类爬虫,但必须在文章页面明显位置给出原文链接。 如果文中有不妥或者错误的地方还望高手的您指出,以免误人子弟。如果您有更好的建议,不如留言一起讨论,共同进步! 再次感谢您耐心的读完本篇文章。
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· Linux系列:如何用 C#调用 C方法造成内存泄露
· AI与.NET技术实操系列(二):开始使用ML.NET
· 记一次.NET内存居高不下排查解决与启示
· 探究高空视频全景AR技术的实现原理
· 理解Rust引用及其生命周期标识(上)
· 物流快递公司核心技术能力-地址解析分单基础技术分享
· .NET 10首个预览版发布:重大改进与新特性概览!
· 单线程的Redis速度为什么快?
· 展开说说关于C#中ORM框架的用法!
· Pantheons:用 TypeScript 打造主流大模型对话的一站式集成库