Hadoop 架构简介
根据对HDFS架构和MapReduce架构的了解,咱们首先清楚的明白了,HDFS和MapReduce的集群其实都是由一些守护进程组成的,而所有的守护进程和运行他们的节点就构成了Hadoop集群。
由上图咱们可以看到NameNode进程和JobTasker进程在一个节点上运行,而DataNode和TaskTracker 在同一个节点上运行。
值得注意的是:DataNode和TaskTracker 需要配对部署在同一个节点,但是NameNode进程和JobTasker却不一定需要部署在同一个节点上,这是为了性能和问稳定性的考虑。
下图,
本文参考书籍------Hadoop海量数据处理 技术详解与项目实战
【推荐】还在用 ECharts 开发大屏?试试这款永久免费的开源 BI 工具!
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步