*太¥^白% - 博客园

2024年8月

摘要： YARN（Yet Another Resource Negotiator）：YARN是Hadoop的资源管理和作业调度系统。本周你可能深入了解了YARN的架构及其组件，包括ResourceManager和NodeManager。ResourceManager负责全局资源调度和作业调度，而NodeMa 阅读全文

posted @ 2024-08-31 20:42 *太¥^白% 阅读(4) 评论(0) 推荐(0) 编辑

每周总结

posted @ 2024-08-24 21:10 *太¥^白% 阅读(3) 评论(0) 推荐(0) 编辑

每周总结

摘要：学习HDFS（Hadoop Distributed File System）时，需要从架构原理、数据存储机制、操作实践以及性能优化等多个方面进行系统掌握。以下是学习HDFS时的重点内容： 1. HDFS架构NameNode：负责管理文件系统的元数据（如文件名、目录结构、文件与数据块的映射、数据块的位阅读全文

posted @ 2024-08-17 19:15 *太¥^白% 阅读(4) 评论(0) 推荐(0) 编辑

每周总结

摘要：本周在学习Hadoop的过程中，我深入了解了分布式文件系统（HDFS）的原理和操作，并开始接触和使用MapReduce框架进行数据处理和分析。以下是我这周的学习和实践总结：理论学习与实践应用在分布式文件系统（HDFS）的学习中，我掌握了其设计理念、架构和工作原理。HDFS通过将大文件分割成多个块阅读全文

posted @ 2024-08-10 19:17 *太¥^白% 阅读(4) 评论(0) 推荐(0) 编辑

每周总结

摘要：【Table】表的操作命令3.1增 1.已存在的表中新增列族 alter ‘stu2:student1’,’schoolinfo’ 2.在命名空间中新建表 create ‘stu2:student1’,’baseinfo’ create ‘stu2:student2’,{NAME=>’baseinf 阅读全文

posted @ 2024-08-03 18:51 *太¥^白% 阅读(4) 评论(0) 推荐(0) 编辑

2024年7月

七月二十七每周总结

摘要：在Hadoop学习的第一个周，我经历了一段充实而又具有挑战性的学习过程。在这个过程中，我深入了解了Hadoop的基本概念、核心组件和工作原理。以下是我对本周学习的总结：首先，我开始了解Hadoop的概念和背景。Hadoop是一个开源的分布式存储和计算框架，旨在处理大规模数据集，并且具有高可靠性和高阅读全文

posted @ 2024-07-27 21:04 *太¥^白% 阅读(5) 评论(0) 推荐(0) 编辑

每周总结

摘要：在过去的一周里，我承担了安装和配置Zookeeper，并连接HBase的任务。这是我首次深入接触分布式系统的组件，对我而言是一次宝贵的学习和实践机会。首先，我从Zookeeper的官方网站下载了最新版本，并按照安装文档进行解压和配置。在配置过程中，我遇到了权限问题，Zookeeper的dataDi 阅读全文

posted @ 2024-07-20 18:32 *太¥^白% 阅读(8) 评论(0) 推荐(0) 编辑

hadoop配置虚拟机和ubuntu

摘要：首先，其实是有两个选择CentOS和ubuntu ，但是CentOS-7已经停服了，所有我果断选择ubuntu。下载ubuntu: 官网下载：https://ubuntu.com/ 1.这是官网打开页面，我们要下载的是Desktop,下面会有一个绿色的按钮，这个是最新的下载。 2.这个是最新的版本阅读全文

posted @ 2024-07-15 17:39 *太¥^白% 阅读(10) 评论(0) 推荐(0) 编辑

每周总结

摘要：这段时间我在学习Hadoop，感觉既充实又有挑战性。刚开始接触Hadoop时，我对它的概念感到有些困惑，但随着学习的深入，我逐渐理解了它的重要性和工作原理。首先，我花了一些时间了解Hadoop的基本架构和核心组件。Hadoop主要由HDFS（Hadoop Distributed File Syst 阅读全文

posted @ 2024-07-13 19:57 *太¥^白% 阅读(6) 评论(0) 推荐(0) 编辑

七月三日

摘要：今天还没有来到及去看昨天的围棋游戏，主要完成报告还有补了一下前几天没有写的每日报告。阅读全文

posted @ 2024-07-04 00:47 *太¥^白% 阅读(5) 评论(0) 推荐(0) 编辑

公告