【大数据】Windows7、Hadoop2.7.6
一、Java配置
1、完整路径不能有空格:C:\jdk1.8.0_101
2、配置环境变量:JAVA_HOME
二、Hadoop配置
1、完整路径不能有空格:F:\0002_BigData\Soft\hadoop-2.7.6
2、创建文件夹:data、name、tmp
3、下载winutil,拷贝至:F:\0002_BigData\Soft\hadoop-2.7.6\bin,此处下载Windows相关配置包:https://download.csdn.net/download/defineconst/11217649
4、配置:hadoop-env.cmd
5、配置:core-site.xml
6、配置:mapred-site.xml
7、配置:hdfs-site.xml
8、配置:yarn-site.xml
9、进入bin,初始化环境
10、进入sbin,启动Hadoop
11、验证
YARN管理界面:http://localhost:8088
HDFS管理界面:http://localhost:50070
12、文件操作
三、参考资料
https://blog.csdn.net/taogumo/article/details/80693292
https://yq.aliyun.com/articles/506632
https://blog.csdn.net/zhongjunlang/article/details/80812669
https://www.cnblogs.com/yjmyzz/p/how-to-remote-debug-hadoop-with-eclipse-and-intellij-idea.html
博客地址: http://www.cnblogs.com/defineconst/
博客版权: 本文以学习、研究和分享为主,欢迎转载和各类爬虫,但必须在文章页面明显位置给出原文链接。 如果文中有不妥或者错误的地方还望高手的您指出,以免误人子弟。如果您有更好的建议,不如留言一起讨论,共同进步! 再次感谢您耐心的读完本篇文章。
博客版权: 本文以学习、研究和分享为主,欢迎转载和各类爬虫,但必须在文章页面明显位置给出原文链接。 如果文中有不妥或者错误的地方还望高手的您指出,以免误人子弟。如果您有更好的建议,不如留言一起讨论,共同进步! 再次感谢您耐心的读完本篇文章。