wss96 - 博客园

2022年10月13日

摘要：一、场景目前使用s3替代hdfs作为hive表数据存储，使用spark sql insert数据到hive表，发现一个简单的查询+插入任务，查询+insert的动作显示已经执行完，任务还在跑，直到跑了两个小时后才执行结束。二、原因 s3对spark默认的commit操作兼容性不强，spark有两阅读全文

posted @ 2022-10-13 17:37 wss96 阅读(250) 评论(0) 推荐(0) 编辑

springboot异步线程池配置

摘要： springboot异步线程池配置 package com.sangfor.api.config; import org.springframework.aop.interceptor.AsyncUncaughtExceptionHandler; import org.springframework 阅读全文

posted @ 2022-10-13 10:33 wss96 阅读(418) 评论(0) 推荐(0) 编辑

springboot配置多数据源mysql，presto，hive等

摘要：下面案例是配置多数据源，两个及以上，但是主数据源只能是一个，默认mybatis使用的是主数据源下面配置mysql为主数据源，通过注解@Primary标注 yaml文件配置： spring: datasource: mysqlMain: #mysql主数据源，可关联mybatis type: com 阅读全文

posted @ 2022-10-13 10:28 wss96 阅读(1344) 评论(2) 推荐(0) 编辑

2021年9月2日

Docker安装ClickHouse数据库（五）

摘要：一、准备工作 1.安装docker-ce （有docker老版本也可以直接使用）安装依赖的软件包 yum install -y yum-utils device-mapper-persistent-data lvm2 配置Docker的阿里云yum源 1 yum-config-manager -- 阅读全文

posted @ 2021-09-02 12:08 wss96 阅读(286) 评论(0) 推荐(0) 编辑

Docker安装SqlServer（四）

摘要：一、准备工作 1.安装docker-ce （有docker老版本也可以直接使用）安装依赖的软件包 yum install -y yum-utils device-mapper-persistent-data lvm2 配置Docker的阿里云yum源 1 yum-config-manager -- 阅读全文

posted @ 2021-09-02 12:00 wss96 阅读(218) 评论(0) 推荐(0) 编辑

Docker安装PgSQL数据库（三）

摘要：一、准备工作安装docker-ce （有docker老版本也可以直接使用）安装依赖的软件包 yum install -y yum-utils device-mapper-persistent-data lvm2 配置Docker的阿里云yum源 1 yum-config-manager --ad 阅读全文

posted @ 2021-09-02 11:53 wss96 阅读(982) 评论(0) 推荐(0) 编辑

Docker安装Oracle数据库（二）

摘要：一、准备工作 1.安装docker-ce （有docker老版本也可以直接使用）安装依赖的软件包 yum install -y yum-utils device-mapper-persistent-data lvm2 配置Docker的阿里云yum源 1 yum-config-manager -- 阅读全文

posted @ 2021-09-02 11:45 wss96 阅读(539) 评论(0) 推荐(0) 编辑

安装Docker

摘要： 1. Docker安装 1.1. 卸载旧版本 1 sudo yum remove docker \ 2 docker-client \ 3 docker-client-latest \ 4 docker-common \ 5 docker-latest \ 6 docker-latest-logro 阅读全文

posted @ 2021-09-02 11:28 wss96 阅读(59) 评论(0) 推荐(0) 编辑

Docker安装MySQL数据库（一）

摘要：准备工作安装docker-ce （有docker老版本也可以直接使用）安装依赖的软件包 yum install -y yum-utils device-mapper-persistent-data lvm2 配置Docker的阿里云yum源 1 yum-config-manager --add- 阅读全文

posted @ 2021-09-02 11:21 wss96 阅读(70) 评论(0) 推荐(0) 编辑

2021年7月9日

Debezium监控MySQL，PGsql，SQLServer

摘要： 1. Debezium简介 Debezium 是一个分布式平台，它将现有的数据库转换为事件流，应用程序消费事件流，就可以知道数据库中的每一个行级更改，并立即做出响应。Debezium 构建在 Apache Kafka 之上，并提供 Kafka 连接器来监视特定的数据库。在介绍 Debezium 之前阅读全文

posted @ 2021-07-09 17:35 wss96 阅读(4261) 评论(1) 推荐(4) 编辑

公告