随笔分类 -  02.flink

005.flink-实时数仓
摘要：flink1.12 hadoop kafka hbase zookeeper redis 阅读全文
posted @ 2021-11-18 10:14 star521 阅读(49) 评论(0) 推荐(0) 编辑
001.hadoop-log4j.properties配置
摘要：resources下 log4j.properties 文件 log4j.rootCategory=ERROR, console log4j.appender.console=org.apache.log4j.ConsoleAppender log4j.appender.console.target 阅读全文
posted @ 2021-09-02 01:40 star521 阅读(419) 评论(0) 推荐(0) 编辑
003.flink-flink集群安装HA
摘要：规划 s101(master+slave) s102(master+slave) s103(slave) 将tar包分发到每个节点 [centos@s101 /home/centos]$xsync.sh flink-1.10.1-bin-scala_2.12.tgz 解压tar包 xcall.sh 阅读全文
posted @ 2021-08-17 13:03 star521 阅读(139) 评论(0) 推荐(0) 编辑
002.flink打jar包时只打包代码，依赖jar包批量指定
摘要：执行脚本完整版 [centos@s101 /home/centos]$flink run -m yarn-cluster -yt /home/centos/hadoop_dependent_jar -yjm 1024 -ytm 1536 -yn 2 -ys 3 -yqu root.centos -y 阅读全文
posted @ 2021-08-17 11:28 star521 阅读(1124) 评论(0) 推荐(0) 编辑
001.如何通过进程号查看进程所依赖的jar包，cd /proc/92232/fd
摘要：[centos@s101 /proc/92232/fd]$jps 82100 JobHistoryServer 92983 NameNode 93783 Master 92232 DFSZKFailoverController 114094 Jps [centos@s101 /proc/92232/ 阅读全文
posted @ 2021-08-17 09:44 star521 阅读(214) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示