上一页 1 2 3 4 5 6 7 8 9 10 ··· 66 下一页
摘要: 1.下载Spark 3.5.0 https://spark.apache.org/downloads.html 2.安装JDK Linux 安装Openjdk 3.安装Hadoop Hadoop-3.3.6分布式集群搭建步骤 4.安装Zookeeper ZooKeeper 3.9.1 集群模式安装 阅读全文
posted @ 2024-01-02 19:44 SpringCore 阅读(576) 评论(0) 推荐(0) 编辑
摘要: 1.连接节点 bin/zkCli.sh -server 192.168.58.131:2181 2.命令行语法 命令基本语法 功能描述 help 显示所有操作命令 ls path 使用ls命令来查看当前znode的子节点[可监听]-w 监听子节点变化-s 附加次级信息 create 普通创建-s 含 阅读全文
posted @ 2024-01-02 13:59 SpringCore 阅读(5) 评论(0) 推荐(0) 编辑
摘要: 1.安装 rsync远程同步工具 apt install -y rsync 2.配置host映射【略】 vi /etc/hosts 3.配置SSH免密登录 使用SSH远程登陆Linux 4.编写xsync集群分发脚本 vi /usr/bin/xsync #! /bin/bash #1 获取输入参数个 阅读全文
posted @ 2024-01-02 13:31 SpringCore 阅读(150) 评论(0) 推荐(0) 编辑
摘要: 1.创建脚本 vi /usr/bin/zk #!/bin/bash if [ $# -lt 1 ] then echo "No Args Input..." exit ; fi case $1 in "start"){ for i in 192.168.58.130 192.168.58.131 1 阅读全文
posted @ 2024-01-02 10:34 SpringCore 阅读(127) 评论(0) 推荐(0) 编辑
摘要: 准备三台集群节点 1.下载ZooKeeper 3.9.1 https://dlcdn.apache.org/zookeeper/zookeeper-3.9.1/apache-zookeeper-3.9.1-bin.tar.gz 2.安装JDK Linux 安装Openjdk 3.解压 mkdir / 阅读全文
posted @ 2024-01-01 20:12 SpringCore 阅读(366) 评论(0) 推荐(0) 编辑
摘要: 配置文件位于Conf/zoo_sample.cfg,如果要生效的话需要重命名为zoo.cfg 1.tickTime tickTime=2000,通信心跳时间,Zookeeper服务器与客户端心跳时间,单位毫秒 2.initLimit initLimit=10,LF初始通信时限,Leader和Foll 阅读全文
posted @ 2024-01-01 18:27 SpringCore 阅读(75) 评论(0) 推荐(0) 编辑
摘要: 1.下载ZooKeeper 3.9.1 https://dlcdn.apache.org/zookeeper/zookeeper-3.9.1/apache-zookeeper-3.9.1-bin.tar.gz 2.安装JDK Linux 安装Openjdk 3.解压 mkdir /usr/zooke 阅读全文
posted @ 2024-01-01 17:52 SpringCore 阅读(179) 评论(0) 推荐(0) 编辑
摘要: 本文章的前提是 Spark 3.5.0 独立部署(Standalone)模式 or Spark Yarn模式 1.在Hadoop上创建用于存放Spark日志的存储路径 hadoop fs -mkdir /spark_logs 2.tmp目录创建存放事件日志的目录 mkdir /tmp/spark-e 阅读全文
posted @ 2024-01-01 15:44 SpringCore 阅读(220) 评论(0) 推荐(0) 编辑
摘要: 1.下载Spark 3.5.0 https://spark.apache.org/downloads.html 2.安装JDK Linux 安装Openjdk 3.安装Hadoop Hadoop-3.3.6分布式集群搭建步骤 4.解压 mkdir /usr/spark tar -zxvf spark 阅读全文
posted @ 2023-12-31 18:21 SpringCore 阅读(181) 评论(0) 推荐(0) 编辑
摘要: 参考地址:https://dev.mysql.com/doc/mysql-apt-repo-quick-guide/en/ 1.下载apt Repo https://dev.mysql.com/downloads/repo/apt/ 2.安装Mysql Apt Repo dpkg -i mysql- 阅读全文
posted @ 2023-12-24 20:10 SpringCore 阅读(267) 评论(0) 推荐(0) 编辑
上一页 1 2 3 4 5 6 7 8 9 10 ··· 66 下一页