yesyes1 - 博客园

2023年8月14日

摘要： # 1、YARN简介（资源管理系统、调度平台） ![](https://img2023.cnblogs.com/blog/2808014/202308/2808014-20230814155024635-884204415.png) # 2、YARN的构件和组件官方架构图： ![](https:/ 阅读全文

posted @ 2023-08-14 16:57 yesyes1 阅读(5) 评论(0) 推荐(0) 编辑

2023年8月13日

有关MapReuce的学习二

摘要： # 1、WordCount编程实现思路 ![](https://img2023.cnblogs.com/blog/2808014/202308/2808014-20230813220414634-1358163781.png) # 2、Map阶段的执行流程 ![](https://img2023.c 阅读全文

posted @ 2023-08-13 22:22 yesyes1 阅读(5) 评论(0) 推荐(0) 编辑

有关MapReduce的学习一

摘要： # 1、MapReduce思想 ![](https://img2023.cnblogs.com/blog/2808014/202308/2808014-20230813165622120-124983360.png) 主要分为两个阶段： ![](https://img2023.cnblogs.com 阅读全文

posted @ 2023-08-13 21:47 yesyes1 阅读(7) 评论(0) 推荐(0) 编辑

WARNING: Use of this script to execute namenode is deprecated. WARNING: Attempting to execute replacement "hdfs namenode" instead.问题的解决

摘要： # 问题描述在我使用这个命令进行hdfs初始化时： ``` hadoop-daemon.sh start namenode ``` 爆出了这样的警告 # 问题解决发现是这个命令现在已经有一点过时，需要换成这个命令才行： ``` hdfs namenode ``` 阅读全文

posted @ 2023-08-13 10:09 yesyes1 阅读(605) 评论(0) 推荐(0) 编辑

2023年8月12日

本周总结

摘要： # 本周回顾主要是将hadoop的环境配置好了，还进行了相关知识的学习； # 遇到的问题环境配置有些地方需要复制到相关文件里面，虽然看着步骤有些多、有些复杂，然后有些文件的环境好像出了一点问题； # 解决方法百度果然很好用，有些教程真的很好用，直接能够解决问题； # 下周计划继续进行hado 阅读全文

posted @ 2023-08-12 22:18 yesyes1 阅读(4) 评论(0) 推荐(0) 编辑

HDFS工作流程与机制

摘要： # 1、各个角色的职责 ![](https://img2023.cnblogs.com/blog/2808014/202308/2808014-20230812101509538-1098113401.png) 主角色：NameNode ![](https://img2023.cnblogs.com 阅读全文

posted @ 2023-08-12 10:24 yesyes1 阅读(8) 评论(0) 推荐(0) 编辑

2023年8月11日

今日学习HDFS相关内容

摘要： # 1、Shell命令行解释说明 # HDFS简介 ![](https://img2023.cnblogs.com/blog/2808014/202308/2808014-20230811144341013-1965117360.png) # HDFS应用场景 ![](https://img2023 阅读全文

posted @ 2023-08-11 23:10 yesyes1 阅读(6) 评论(0) 推荐(0) 编辑

2023年8月10日

Hadoop初体验

摘要： # 1、HDFS初体验 ![](https://img2023.cnblogs.com/blog/2808014/202308/2808014-20230810182752246-478715480.png) 既能够通过后台的终端命令进行文件的管理，也可以通过Web UI界面进行相关的操作；可以知阅读全文

posted @ 2023-08-10 18:39 yesyes1 阅读(11) 评论(0) 推荐(0) 编辑

Hadoop集群启停命令以及Web UI界面的相关介绍

摘要： # 1、Hadoop集群的启停命令（我是将文件都配置好了，直接使用最方便的启停命令就能进行使用） ``` start-all.sh stop-all.sh ``` # 2、HDFS集群的Web UI界面 ![](https://img2023.cnblogs.com/blog/2808014/202 阅读全文

posted @ 2023-08-10 18:11 yesyes1 阅读(159) 评论(0) 推荐(0) 编辑

2023年8月9日

ERROR: Attempting to operate on hdfs namenode as root问题的解决

摘要： # 问题描述在我尝试启动hadoop集群的时候，突然出现这个问题，一串的ERROR啊，真的是很搞心态！ ![](https://img2023.cnblogs.com/blog/2808014/202308/2808014-20230809220143092-982803489.png) # 问题阅读全文

posted @ 2023-08-09 22:04 yesyes1 阅读(81) 评论(0) 推荐(0) 编辑

liuzijin

公告