08 2024 档案
摘要：学习Hadoop数据库（第四周） 本周工作总结 深入学习YARN资源管理 本周，我重点学习了YARN（Yet Another Resource Negotiator）的资源管理和调度功能。我了解了YARN的架构和组件，包括ResourceManager、NodeManager和Application
阅读全文
摘要：学习Hadoop数据库（第三周） 本周工作总结 深入研究HBase数据操作 本周，我重点学习了HBase的数据操作，包括如何进行数据的插入、查询、更新和删除。我搭建了HBase环境，并使用HBase Shell和Java API进行了实际操作。我编写了代码实现了数据的插入和检索功能，并测试了数据的更
阅读全文
摘要：学习Hadoop数据库（第二周） 本周工作总结 深入学习Hadoop生态系统组件 本周，我深入学习了Hadoop生态系统中的几个重要组件，包括Hive、Pig和HBase。通过阅读官方文档和相关教程，我掌握了Hive的数据仓库功能，它允许使用SQL-like语言进行数据查询和分析。Pig的脚本语言（
阅读全文
摘要：学习Hadoop数据库 完成Hadoop基本概念学习 本周我主要学习了Hadoop的基本概念和架构，涵盖了Hadoop的核心组件，如HDFS（Hadoop Distributed File System）和MapReduce。通过阅读官方文档、在线教程和相关书籍，我掌握了Hadoop的工作原理和主要
阅读全文
摘要：7月30日 今天的重点是Hadoop的MapReduce编程模型。我学习了Map和Reduce的基本概念，并编写了一个简单的Word Count程序。尽管遇到了一些编译错误，但经过调试后成功运行了程序。明天打算研究如何优化MapReduce任务。
阅读全文
摘要：7月29日 今天深入探讨了HDFS的容错机制。学习了数据副本如何在集群节点间复制，以防数据丢失。我还练习了用命令行工具进行数据操作，比如上传和下载文件。感觉对HDFS有了更深入的理解。
阅读全文
摘要：7月28日 今天重点学习了HDFS（Hadoop分布式文件系统）的结构和功能。我了解了数据块的存储方式和副本机制。通过创建和操作HDFS中的文件，加深了对其数据存储方式的理解。明天计划学习HDFS的容错机制。
阅读全文
摘要：7月27 今天开始了Hadoop的学习旅程。我先了解了Hadoop的背景和架构，包括HDFS和MapReduce的基本概念。安装和配置了Hadoop环境，虽然遇到了一些问题，但最终成功运行了第一个示例程序。期待明天能深入了解HDFS的工作原理。
阅读全文
