摘要: 一、docker engine 19.03.4安装 1、验证linux内核版本(docker安装,需3.10版本以上) uname -r 2、移除旧版本docker(早期安装过,需移除旧版本) yum remove docker docker-client docker-client-latest 阅读全文
posted @ 2020-05-28 21:32 XSmileSmile 阅读(657) 评论(0) 推荐(0) 编辑
摘要: 一、系统配置 3台虚拟机 hadoop1: 4g内存 2核 80g硬盘 hadoop2 2g内存 1核 12g硬盘 hadoop3: 2g内存 1核 12g硬盘 client: 1g内存 1核 12g硬盘 二、scala安装 1、下载scala 2.12.8.tgz安装包 2、远程传输到hadoop 阅读全文
posted @ 2020-05-17 17:30 XSmileSmile 阅读(397) 评论(0) 推荐(0) 编辑
摘要: 2020双十 阿里云服务器ECS团购特惠链接 前提条件:需先安装zookeeper与hadoop zookeeper安装 hadoop安装 一、系统配置 3台虚拟机 hadoop1: 4g内存 2核 80g硬盘 hadoop2 1g内存 1核 8g硬盘 hadoop3: 1g内存 1核 8g硬盘 二 阅读全文
posted @ 2020-05-11 23:20 XSmileSmile 阅读(5625) 评论(2) 推荐(1) 编辑
摘要: 2020双十 阿里云服务器ECS团购特惠链接 一、系统配置 3台虚拟机 hadoop1: 4g内存 2核 80g硬盘 作为master节点 hadoop2 1g内存 1核 8g硬盘 作为slave节点 hadoop3: 1g内存 1核 8g硬盘 作为slave节点 二、基础概念 hadoop主要包含 阅读全文
posted @ 2020-05-11 21:24 XSmileSmile 阅读(4701) 评论(0) 推荐(2) 编辑
摘要: 2020双十 阿里云服务器ECS团购特惠链接 一、系统配置 3台虚拟机 hadoop1: 4g内存 2核 80g硬盘 作为master节点 hadoop2 1g内存 1核 8g硬盘 作为slave节点 hadoop3: 1g内存 1核 8g硬盘 作为slave节点 二、基础概念 hadoop主要包含 阅读全文
posted @ 2020-05-07 23:58 XSmileSmile 阅读(2712) 评论(0) 推荐(0) 编辑
摘要: 2020双十 阿里云服务器ECS团购特惠链接 一、系统配置 3台虚拟机 hadoop1: 1g内存 1核 8g硬盘 hadoop2 1g内存 1核 8g硬盘 hadoop3: 1g内存 1核 8g硬盘 二、集群安装 1、下载安装包elasticsearch-oss-7.6.2-linux-x86_6 阅读全文
posted @ 2020-05-05 09:45 XSmileSmile 阅读(2292) 评论(0) 推荐(0) 编辑
摘要: 1、下载已经编译好的 "kafka manager 2.0.0.2.zip安装包" 2、修改配置文件(xx安装目录/kafka manager 2.0.0.2/conf/application.conf) 3、启动kafka manager服务 4、jps查看进程验证 5、登陆Kafka Manag 阅读全文
posted @ 2020-05-02 23:00 XSmileSmile 阅读(505) 评论(0) 推荐(0) 编辑
摘要: 注:zookeeper集群节点数必须为奇数,满足leader选举算法(当选leader的节点所需支持节点数过半的原则),且>=3 1、下载zookeeper安装包 curl -O https://archive.apache.org/dist/zookeeper/zookeeper-3.4.10/z 阅读全文
posted @ 2020-05-02 22:09 XSmileSmile 阅读(518) 评论(0) 推荐(0) 编辑
摘要: 1、下载kafka安装包 "kafka_2.11 0.11.0.2.tgz" 到集群的某台节点上(hadoop1) 2、将安装包远程传输到节点hadoop2、hadoop3上 scp r kafka_2.11 0.11.0.2.tgz root@hadoop2: scp r kafka_2.11 0 阅读全文
posted @ 2020-05-02 16:46 XSmileSmile 阅读(401) 评论(0) 推荐(0) 编辑
摘要: 1、cron表达式格式 2、cron各位置取值符 参考博客: (1) "Spring Task中cron表达式详解" (2) "Spring Task定时任务的配置和使用" 阅读全文
posted @ 2020-05-02 16:23 XSmileSmile 阅读(924) 评论(0) 推荐(0) 编辑