11 2021 档案
摘要：1 解决问题 解决了flink任务提交依赖传统Jar提交的问题，改为Java应用程序获取RemoteEnvironment方式提交，便于维护管理等。 通过次提交方式，可以做进一步的延伸，通过Flink版本管理，Sql管理。只需要简单的存储版本信息，某个任务的Sql信息，就能快速实现任务提交，以此来摒
阅读全文
摘要：kafka2.5.1的集群部署 1 规划 名称 版本 gcw1 kafka2.5.1 gcw2 kafka2.5.1 gcw3 kafka2.5.1 2 下载解压 华为镜像 ## 解压 [root@gcw1 src]# tar -zxvf kafka_2.13-2.5.1.tgz -C /opt/a
阅读全文
摘要：1 前置版本选择 名称 版本 Flink 1.12.5 JDK jdk8_281 Maven 3.6.3 1.2 Maven编译所用的settings <?xml version="1.0" encoding="UTF-8"?> <settings xmlns="http://maven.apach
阅读全文
摘要：1 规划 主机名称 node.name 内存 gcw1 gcw1 4G gcw2 gcw2 4G gcw3 gcw3 4G 2 准备工作 2.1 创建用户 es不能用root用户启动，先创建一个es专用用户 # 集群每个节点都需要 useradd es # 输入密码 passwd es ## 创建数
阅读全文
摘要：数据类型 为了提高性能，较传统数据库而言，clickhouse提供了复合数据类型。 ClickHouse的Upadate和Delete是由Alter变种实现。 1 整型 整型包括有符号整型和无符号整型两种 1.1 有符号整型 类型 范围 字节 int8 [-128,127] 1 int16 [-32
阅读全文
摘要：0 前置设置 host zk clickhouse gcw1 3.4.14 20.5.4.40-2 gcw2 3.4.14 20.5.4.40-2 gcw3 3.4.14 20.5.4.40-2 1 下载 清华大学开源软件镜像站 clickhouse 若是下载慢，可以从清华镜像站下载，手动导入 [r
阅读全文
摘要：0 前置条件 主机gcw1，gcw2，gcw3 JDK 1 zk下载 华为镜像 2 上传解压 [root@gcw2 src]# tar -zxvf zookeeper-3.4.14.tar.gz -C /opt/app/ 3 配置文件修改 三台主机同样配置 [root@gcw3 src]# cd /
阅读全文
摘要：1.1 pom文件 <properties> <maven.compiler.source>8</maven.compiler.source> <maven.compiler.target>8</maven.compiler.target> <project.build.sourceEncoding
阅读全文