随笔分类 -  dov004-flink

|NO.Z.10000|——————————|Deployment|——————————————————————————————————————
摘要:NO: Walter Savage Landor:strove with none,for none was worth my strife.Nature I loved and, next to Nature, Art:I warm'd both hands before the fire of 阅读全文

posted @ 2022-04-17 16:11 yanqi_vip 阅读(6) 评论(0) 推荐(0) 编辑

|NO.Z.00007|——————————|Deployment|——|Hadoop&Flink计算领域锋利的武器.v07|——|Flink.v04|Yarn模式部署|yarn session方式启动|
摘要:一、方式一:Per job方式 ### 方式一:Per job方式 ~~~ 直接在YARN上提交运行Flink作业(Run a Flink job on YARN) ~~~ Per job启动流程 二、Per job方式启动实例 ### 启动一个应用实例 ### 在yarn-cluster-UI下查 阅读全文

posted @ 2022-04-17 16:11 yanqi_vip 阅读(14) 评论(0) 推荐(0) 编辑

|NO.Z.00006|——————————|Deployment|——|Hadoop&Flink计算领域锋利的武器.v06|——|Flink.v03|Yarn模式部署|yarn session方式启动|
摘要:一、Flink.Yarn模式部署 ### 启动一个YARN session(Start a long-running Flink cluster on YARN); ~~~ 方式一:yarn session启动 ~~~ 方式二:per job方式启动 二、YARN Session方式:Flink.y 阅读全文

posted @ 2022-04-17 16:11 yanqi_vip 阅读(61) 评论(0) 推荐(0) 编辑

|NO.Z.00005|——————————|Deployment|——|Hadoop&Flink计算领域锋利的武器.v05|——|Flink.v02|StandAlone模式测试|
摘要:一、在IDEA下导入打jar插件 ### 将WordCountScalaStream打成jar包 ~~~ 注意:集群搭建完毕后,Flink程序就可以打成Jar, ~~~ 在集群环境下类似于Step7中一样提交执行计算任务打jar包插件: ~~~ 该插件可以把包含所有的Flink程序需要的所有的依赖文 阅读全文

posted @ 2022-04-17 16:10 yanqi_vip 阅读(8) 评论(0) 推荐(0) 编辑

|NO.Z.00003|——————————|Deployment|——|Hadoop&Flink计算领域锋利的武器.v03|——|Redis.v01|环境部署|
摘要:一、Redis单机版安装和使用 ### 安装C 语言需要的GCC 环境 [root@hadoop ~]# yum install -y gcc-c++ [root@hadoop ~]# yum install -y wget ### 下载并解压缩Redis 源码压缩包 [root@hadoop so 阅读全文

posted @ 2022-04-17 16:09 yanqi_vip 阅读(4) 评论(0) 推荐(0) 编辑

|NO.Z.00004|——————————|Deployment|——|Hadoop&Flink计算领域锋利的武器.v04|——|Flink.v01|StandAlone模式部署|
摘要:一、Flink安装和部署 ### Flink支持多种安装模式 ~~~ local(本地):单机模式,一般本地开发调试使用 ~~~ StandAlone 独立模式:Flink自带集群,自己管理资源调度,生产环境也会有所应用 ~~~ Yarn模式:计算资源统一由Hadoop YARN管理,生产环境应用较 阅读全文

posted @ 2022-04-17 16:09 yanqi_vip 阅读(67) 评论(0) 推荐(0) 编辑

|NO.Z.00001|——————————|Deployment|——|Hadoop&Flink计算领域锋利的武器.v01|——|ZookeeperKafka.v01|环境部署|
摘要:一、集群搭建:搭建设计 ### 分配三台Linux,用于安装拥有三个节点的Kafka集群。 Hadoop01 192.168.1.121 Hadoop02 192.168.1.122 Hadoop03 192.168.1.123 一、部署kafka集群:配置hosts文件 ### 以上三台主机的/e 阅读全文

posted @ 2022-04-17 16:08 yanqi_vip 阅读(30) 评论(0) 推荐(0) 编辑

|NO.Z.00002|——————————|Deployment|——|Hadoop&Flink计算领域锋利的武器.v02|——|KafkaEagle.v01|监控工具|环境部署|
摘要:一、部署kafka-eagle:开启kafka节点的JMX ### 下载并解压kafka-eagle部署包 ~~~ # 下载编译好的包 [root@hadoop01 software]# wget http://pkgs-linux.cvimer.com/kafka-eagle.zip [root@ 阅读全文

posted @ 2022-04-17 16:08 yanqi_vip 阅读(21) 评论(0) 推荐(0) 编辑

|NO.Z.00000|——————————|Deployment|——————————————————————————————————————
摘要:NO: Walter Savage Landor:strove with none,for none was worth my strife.Nature I loved and, next to Nature, Art:I warm'd both hands before the fire of 阅读全文

posted @ 2022-04-17 16:07 yanqi_vip 阅读(13) 评论(0) 推荐(0) 编辑

< 2025年2月 >
26 27 28 29 30 31 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 1
2 3 4 5 6 7 8

导航

统计

点击右上角即可分享
微信分享提示