文章分类 -  大数据

hadoop3 完全分布式安装
摘要：hadoop3 完全分布式安装 1. 环境准备 最低硬件要求：CPU 2核、内存：4G、硬盘：100G CentOS7 最小安装 JDK 1.8 HADOOP 3.3.4 1.1. 主机名 和 IP 地址 # 编辑下方文件，修改内容为自己想要的主机名，如 mitchell-101 vi /etc/h 阅读全文
posted @ 2023-10-11 17:38 寻梦99 阅读(42) 评论(0) 推荐(0) 编辑
Hadoop、Spark等5种大数据框架对比，你的项目该用哪种？
摘要：# Hadoop、Spark等5种大数据框架对比，你的项目该用哪种？ 2023-02-05 16:52·[老李讲安全](https://www.toutiao.com/c/user/token/MS4wLjABAAAA8EqT0AWbeM1PPY02tgi8TDBCF7MrfYhlIfYKa0pic 阅读全文
posted @ 2023-08-21 11:22 寻梦99 阅读(172) 评论(0) 推荐(0) 编辑
Hadoop原理及应用
摘要：# Hadoop原理及应用 2023-03-04 23:06·[勇者热情生活家](https://www.toutiao.com/c/user/token/MS4wLjABAAAAQo0OJlRG6WcfpyqHswCsxIo1WEQRUz3gGu8LIXxszJI/?source=tuwen_de 阅读全文
posted @ 2023-08-13 17:42 寻梦99 阅读(160) 评论(0) 推荐(0) 编辑
大数据-Hadoop-概念
摘要：大数据-Hadoop-概念 *学习1个框架思路：概念、平台环境准备（前戏）、Hadoop生产集群搭建、常见错误的解决方案* ## **1、Hadoop是什么** 1）Hadoop是一个由 Apache 基金会所开发的分布式系统基础架构 分布式 即 多台服务器共同来完成某一项任务 2）主要解决， 海量 阅读全文
posted @ 2023-08-12 21:08 寻梦99 阅读(62) 评论(0) 推荐(0) 编辑
大数据-Hadoop-生产集群搭建（一、Hadoop运行模式-本地运行）
摘要：# 大数据-Hadoop-生产集群搭建（一、Hadoop运行模式-本地运行） *学习1个框架思路：概念、平台环境准备（前戏）、Hadoop生产集群搭建、常见错误的解决方案* ## **一、Hadoop运行模式——本地运行** ### **1、Hadoop官网** **1）登录官网** **https 阅读全文
posted @ 2023-08-12 21:00 寻梦99 阅读(103) 评论(0) 推荐(0) 编辑
大数据-Hadoop-平台环境准备（前戏：一、准备模板虚拟机）
摘要：# 大数据-Hadoop-平台环境准备（前戏：一、准备模板虚拟机） *学习1个框架思路：概念、平台环境准备（前戏）、Hadoop生产集群搭建、常见错误的解决方案* # **一、准备模板虚拟机** ## **1、制作Hadoop100的虚拟机模板** CPU1C|内存3GB|硬盘50GB|IP|主机名 阅读全文
posted @ 2023-08-12 20:46 寻梦99 阅读(60) 评论(0) 推荐(0) 编辑
大数据-Hadoop-平台环境准备（前戏：二、克隆虚拟机）
摘要：*学习1个框架思路：概念、平台环境准备（前戏）、Hadoop生产集群搭建、常见错误的解决方案* ## **二、克隆虚拟机** ### **1、用Hadoop100的虚拟机模板克隆3台虚拟机** 利用 [《大数据-Hadoop-平台环境准备（前戏：一、准备模板虚拟机）》](http://mp.weix 阅读全文
posted @ 2023-08-12 20:31 寻梦99 阅读(47) 评论(0) 推荐(0) 编辑
大数据-Hadoop-生产集群搭建（二、Hadoop运行模式-完全分布式01）
摘要：*学习1个框架思路：概念、平台环境准备（前戏）、Hadoop生产集群搭建、常见错误的解决方案* **二、Hadoop运行模式——完全分布式** **1、\**准备3台虚拟机（关闭防火墙、配置静态IP 和 主机名称）\**** 这里参考[**《**](http://mp.weixin.qq.com/s 阅读全文
posted @ 2023-08-12 20:09 寻梦99 阅读(30) 评论(0) 推荐(0) 编辑