apeGcWell - 博客园

2022年8月

摘要： 1 打开Profile 设置需在mysql中 0.15之前 SET is_report_success=true; 0.15 及之后的版本执行下面的设置 SET [GLOBAL] enable_profile=true; 测试1.1.1 MySQL [(none)]> SET GLOBAL ena 阅读全文

posted @ 2022-08-24 10:35 apeGcWell 阅读(1737) 评论(0) 推荐(0) 编辑

Doris0.15升级到1.1.1

摘要： 1 版本信息 | 类型 | 版本 | | | | | Doris | 0.15 | | JDK | 1.8 | | 类型 | 数量 | 位置 | 元数据位置 | | | | | | | Doris be | 3 | /opt/aap/doris/be | /data/doris/15/be/meta 阅读全文

posted @ 2022-08-17 15:33 apeGcWell 阅读(601) 评论(0) 推荐(0) 编辑

doris-flink-connect1.14.5编译及问题处理

摘要： 1 前提条件编译源码来自https://github.com/apache/doris-flink-connector，日期2022-08-16 1.1 版本 | doris | flink | JDK | | | | | | 1.1.1 | 1.14.5 | 1.8 | 1.2 是否独立编译没阅读全文

posted @ 2022-08-16 15:06 apeGcWell 阅读(908) 评论(0) 推荐(0) 编辑

2021年12月

flink或datax同步hbase到其他库错行问题

摘要： 1 问题描述 1.1 datax 当前业务数据统一存储在hbase，某一天oracle/mysql需要一些同步数据时，我们用datax处理hbase到oracle/mysql时出现错行问题，即一条数据错成两条（或多条）来处理 1.2 doris 业务存储切换时，切换到doris时，由hbase的部分阅读全文

posted @ 2021-12-17 17:02 apeGcWell 阅读(798) 评论(3) 推荐(0) 编辑

2021年11月

Java应用程序远程提交FLink任务

摘要： 1 解决问题解决了flink任务提交依赖传统Jar提交的问题，改为Java应用程序获取RemoteEnvironment方式提交，便于维护管理等。通过次提交方式，可以做进一步的延伸，通过Flink版本管理，Sql管理。只需要简单的存储版本信息，某个任务的Sql信息，就能快速实现任务提交，以此来摒阅读全文

posted @ 2021-11-18 00:13 apeGcWell 阅读(3308) 评论(3) 推荐(0) 编辑

kafka2.5.1集群部署

摘要： kafka2.5.1的集群部署 1 规划名称版本 gcw1 kafka2.5.1 gcw2 kafka2.5.1 gcw3 kafka2.5.1 2 下载解压华为镜像 ## 解压 [root@gcw1 src]# tar -zxvf kafka_2.13-2.5.1.tgz -C /opt/a 阅读全文

posted @ 2021-11-17 23:08 apeGcWell 阅读(233) 评论(0) 推荐(0) 编辑

Flink如何编译，版本1.12.5

摘要： 1 前置版本选择名称版本 Flink 1.12.5 JDK jdk8_281 Maven 3.6.3 1.2 Maven编译所用的settings <?xml version="1.0" encoding="UTF-8"?> <settings xmlns="http://maven.apach 阅读全文

posted @ 2021-11-17 14:20 apeGcWell 阅读(185) 评论(0) 推荐(0) 编辑

elasticsearch7.3 集群搭建

摘要： 1 规划主机名称 node.name 内存 gcw1 gcw1 4G gcw2 gcw2 4G gcw3 gcw3 4G 2 准备工作 2.1 创建用户 es不能用root用户启动，先创建一个es专用用户 # 集群每个节点都需要 useradd es # 输入密码 passwd es ## 创建数阅读全文

posted @ 2021-11-11 23:32 apeGcWell 阅读(151) 评论(0) 推荐(0) 编辑

clickhouse的数据类型

摘要：数据类型为了提高性能，较传统数据库而言，clickhouse提供了复合数据类型。 ClickHouse的Upadate和Delete是由Alter变种实现。 1 整型整型包括有符号整型和无符号整型两种 1.1 有符号整型类型范围字节 int8 [-128,127] 1 int16 [-32 阅读全文

posted @ 2021-11-06 23:34 apeGcWell 阅读(236) 评论(0) 推荐(0) 编辑

clickhouse 20.5.4.40-2集群搭建

摘要： 0 前置设置 host zk clickhouse gcw1 3.4.14 20.5.4.40-2 gcw2 3.4.14 20.5.4.40-2 gcw3 3.4.14 20.5.4.40-2 1 下载清华大学开源软件镜像站 clickhouse 若是下载慢，可以从清华镜像站下载，手动导入 [r 阅读全文

posted @ 2021-11-06 22:10 apeGcWell 阅读(134) 评论(0) 推荐(0) 编辑