02假期第二周进度报告

在第二周的学习中,我基本完成了Hadoop环境的配置。这一过程包括配置HDFS、YARN等核心组件,并确保各节点之间的通信顺畅。在配置的过程中,我通过阅读Hadoop官方文档,深入了解了各个配置参数的作用。同时,我也观看了B站黑马程序员的相关视频,帮助我更直观地理解和解决配置中的一些疑难问题。

在学习Hadoop的过程中,我对它的基础架构有了更清晰的认识。Hadoop主要由两个核心组件组成:HDFS(Hadoop Distributed File System)和YARN(Yet Another Resource Negotiator)。HDFS负责数据的存储,通过将大文件分块并分散存储在多个节点上,实现高容错性和可扩展性。而YARN则负责资源的管理和任务的调度,确保集群中的计算资源能够被合理分配和使用。

总结下来,这周我不仅完成了Hadoop环境的搭建,也进一步加深了对Hadoop基础架构和工作原理的理解,为后续的大数据处理奠定了坚实基础。接下来,我计划深入学习Hadoop生态系统中的其他组件,比如MapReduce和Hive等。

本文作者:丰川扬子

本文链接:https://www.cnblogs.com/newzeon/p/18300535

版权声明:本作品采用知识共享署名-非商业性使用-禁止演绎 2.5 中国大陆许可协议进行许可。

posted @   丰川扬子  阅读(2)  评论(0编辑  收藏  举报
历史上的今天:
2023-07-13 第三周第五天进度总结
点击右上角即可分享
微信分享提示
💬
评论
📌
收藏
💗
关注
👍
推荐
🚀
回顶
收起
  1. 1 404 not found REOL
404 not found - REOL
00:00 / 00:00
An audio error has occurred.