随笔分类 - 大数据

hadoop完全分布式部署集成spark onyarn

摘要：hadoop 集群搭建前言部署不同模式集群的区别 1.单机模式（standalone）单机模式是Hadoop的默认模式。这种模式在一台单机上运行，没有分布式文件系统，而是直接读写本地操作系统的文件系统。当首次解压Hadoop的源码包时，Hadoop无法了解硬件安装环境，便保守地选择了最小配置。阅读全文

posted @ 2022-10-03 19:15 YIDADA-SRE 阅读(479) 评论(1) 推荐(0) 编辑

伪分布式部署HadoopSpark与容器化参考

摘要：hadoop-spark 搭建过程参考网上的文档与解决问题的文章地址 https://www.cnblogs.com/luo630/p/13271637.html https://www.cnblogs.com/dintalk/p/12234718.html https://blog.csdn.ne 阅读全文

posted @ 2022-09-26 17:50 YIDADA-SRE 阅读(146) 评论(0) 推荐(0) 编辑