05 2020 档案
摘要:下面记录一下Zookeeper使用相关的入门知识,包括基本命令、四种数据节点、watcher监听、访问控制列表ACL和相关API操作。 介绍 Zookeeper是基于Google关于Chubby Lock的论文来开源实际的,主要用于分布式架构进行协调和管理,在大数据框架中作为一个“润滑剂”而存在,协
阅读全文
摘要:记录一下Mac下使用IDEA导入zookeeper源码,并debug测试的过程,全文参考了文末博文。 源码准备 github下载源码,地址为 "https://github.com/apache/zookeeper" ,选择对应的分支进行下载,这里选择的是3.4.14。 安装ant 官网( "htt
阅读全文
摘要:下面记录下YARN的服务组件和提交流程的基础知识,主要参考文末博文,其中 提交流程部分直接引用 ,感谢被引用的博主 "PeTu" 。 YARN介绍 YARN是在Hadoop2.0引入的,它的出现是历史的产物。在Hadoop1.0版本时,有JobTracker和TaskTracker来完成资源调度和任
阅读全文