随笔分类 -  大数据

【1】基于docker搭建hadoop+hive+spark+hbase+zookeeper+scale集群
摘要：1、设置主机上的虚拟缓存 当本地内存不足时，可以使用虚拟内存将一些内存数据转移到硬盘上，从而扩展计算机的内存容量。这样可以让计算机运行更复杂、更占用内存的程序，不会出现内存不足的情况。减轻物理存储器不足的压力，设置虚拟内存可以在内存不够的情况下将缓存一时放在硬盘上，解决内存不足问题。 通过虚拟内存， 阅读全文
posted @ 2023-10-24 22:18 红酒人生 阅读(635) 评论(0) 推荐(2) 编辑
基于docker容器，搭建hadoop+spark+hive+hbase+Zookeeper Scala集群
摘要：1.安装Docker和Docker Compose 2.下载镜像 docker pull bde2020/hadoop-base:2.0.0-hadoop3.2.1-java8 docker pull bde2020/hadoop-namenode:2.0.0-hadoop3.2.1-java8 d 阅读全文
posted @ 2023-10-24 00:10 红酒人生 阅读(470) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示