随笔分类 -  ClickHouse

ClickHouse学习与总结
摘要:目录MongoDB创建一张表用法示例资料分享系列文章clickhouse系列文章 MongoDB MongoDB 引擎是只读表引擎,允许从远程 MongoDB 集合中读取数据(SELECT查询)。引擎只支持非嵌套的数据类型。不支持 INSERT 查询。 创建一张表 CREATE TABLE [IF 阅读全文
posted @ 2024-01-30 20:06 张飞的猪 阅读(257) 评论(0) 推荐(0) 编辑
摘要:MySQL表引擎 MySQL引擎可以对存在远程MySQL服务器上的数据执行SELECT查询。 调用格式: MySQL('host:port', 'database', 'table', 'user', 'password'[, replace_query, 'on_duplicate_clause' 阅读全文
posted @ 2024-01-28 11:04 张飞的猪 阅读(96) 评论(0) 推荐(0) 编辑
摘要:HDFS 这个引擎提供了与Apache Hadoop生态系统的集成,允许通过ClickHouse管理HDFS上的数据。这个引擎提供了Hadoop的特定功能。 用法 ENGINE = HDFS(URI, format) URI 参数是HDFS中整个文件的URI format 参数指定一种可用的文件格式 阅读全文
posted @ 2024-01-27 13:59 张飞的猪 阅读(114) 评论(0) 推荐(0) 编辑
摘要:ClickHouse(21)ClickHouse集成Kafka表引擎详细解析目录Kafka表集成引擎配置Kerberos 支持虚拟列资料分享系列文章clickhouse系列文章 Kafka表集成引擎 此引擎与Apache Kafka结合使用。 Kafka 特性: 发布或者订阅数据流。 容错存储机制。 处理流数据。 老版Kafka集成表引擎参数格式: Kafka(kafka_ 阅读全文
posted @ 2024-01-12 21:04 张飞的猪 阅读(295) 评论(0) 推荐(0) 编辑
摘要:目录PostgreSQL创建一张表实施细节用法示例资料分享系列文章clickhouse系列文章 PostgreSQL PostgreSQL 引擎允许 ClickHouse 对存储在远程 PostgreSQL 服务器上的数据执行 SELECT 和 INSERT 查询. 创建一张表 CREATE TAB 阅读全文
posted @ 2024-01-02 20:02 张飞的猪 阅读(314) 评论(3) 推荐(0) 编辑
摘要:目录Hive集成表引擎创建表使用示例如何使用HDFS文件系统的本地缓存查询 ORC 输入格式的Hive 表在 Hive 中建表在 ClickHouse 中建表查询 Parquest 输入格式的Hive 表在 Hive 中建表在 ClickHouse 中建表查询文本输入格式的Hive表在Hive 中建 阅读全文
posted @ 2023-12-23 14:00 张飞的猪 阅读(380) 评论(0) 推荐(0) 编辑
摘要:目录创建表用法示例资料分享系列文章clickhouse系列文章 ODBC集成表引擎使得ClickHouse可以通过ODBC方式连接到外部数据库. 为了安全地实现 ODBC 连接,ClickHouse 使用了一个独立程序 clickhouse-odbc-bridge. 如果ODBC驱动程序是直接从 c 阅读全文
posted @ 2023-12-18 16:49 张飞的猪 阅读(268) 评论(0) 推荐(0) 编辑
摘要:目录JDBC建表用法示例JDBC表函数资料分享系列文章clickhouse系列文章 JDBC 允许CH通过JDBC连接到外部数据库。 要实现JDBC连接,CH需要使用以后台进程运行的程序 clickhouse-jdbc-bridge。 该引擎支持Nullable数据类型。 建表 CREATE TAB 阅读全文
posted @ 2023-12-11 19:26 张飞的猪 阅读(280) 评论(0) 推荐(1) 编辑
摘要:日志引擎系列 这些引擎是为了需要写入许多小数据量(少于一百万行)的表的场景而开发的。 这系列的引擎有: StripeLog Log TinyLog 共同属性 引擎: 数据存储在磁盘上。 写入时将数据追加在文件末尾。 不支持突变操作,也就是更新。 不支持索引。 这意味着 `SELECT` 在范围查询时 阅读全文
posted @ 2023-12-04 17:06 张飞的猪 阅读(338) 评论(0) 推荐(1) 编辑
摘要:GraphiteMergeTree该引擎用来对Graphite数据(图数据)进行瘦身及汇总。对于想使用ClickHouse来存储Graphite数据的开发者来说可能有用。 如果不需要对Graphite数据做汇总,那么可以使用任意的ClickHouse表引擎;但若需要,那就采用GraphiteMerg 阅读全文
posted @ 2023-09-21 19:18 张飞的猪 阅读(345) 评论(0) 推荐(1) 编辑
摘要:目录建表语法使用场景合并算法使用例子、资料分享系列文章clickhouse系列文章 VersionedCollapsingMergeTree引擎继承自MergeTree并将折叠行的逻辑添加到合并数据部分的算法中。VersionedCollapsingMergeTree用于相同的目的折叠树但使用不同的 阅读全文
posted @ 2023-06-21 10:50 张飞的猪 阅读(184) 评论(0) 推荐(0) 编辑
摘要:目录建表折叠数据算法资料分享系列文章clickhouse系列文章 该引擎继承于MergeTree,并在数据块合并算法中添加了折叠行的逻辑。CollapsingMergeTree会异步的删除(折叠)这些除了特定列Sign有1和-1的值以外,其余所有字段的值都相等的成对的行。没有成对的行会被保留。因此, 阅读全文
posted @ 2023-02-28 22:09 张飞的猪 阅读(375) 评论(0) 推荐(1) 编辑
摘要:目录建表语法查询和插入数据数据处理逻辑ClickHouse相关资料分享系列文章clickhouse系列文章 AggregatingMergeTree引擎继承自 MergeTree,并改变了数据片段的合并逻辑。ClickHouse会将一个数据片段内所有具有相同主键(准确的说是排序键)的行替换成一行,这 阅读全文
posted @ 2023-02-06 20:04 张飞的猪 阅读(266) 评论(0) 推荐(0) 编辑
摘要:目录建表语法数据处理汇总的通用规则AggregateFunction 列中的汇总嵌套结构数据的处理资料分享系列文章clickhouse系列文章 SummingMergeTree引擎继承自MergeTree。区别在于,当合并SummingMergeTree表的数据片段时,ClickHouse会把所有具 阅读全文
posted @ 2023-01-16 21:18 张飞的猪 阅读(303) 评论(0) 推荐(0) 编辑
摘要:目录建表语法数据处理策略资料分享系列文章clickhouse系列文章 MergeTree拥有主键,但是它的主键却没有唯一键的约束。这意味着即便多行数据的主键相同,它们还是能够被正常写入。在某些使用场合,用户并不希望数据表中含有重复的数据。ReplacingMergeTree就是在这种背景下为了数据去 阅读全文
posted @ 2022-11-09 19:18 张飞的猪 阅读(944) 评论(0) 推荐(1) 编辑
摘要:目录建表数据存储主键和索引在查询中的表现主键的选择选择与排序键不同的主键索引和分区在查询中的应用部分单调主键的使用跳数索引可用的索引类型并发数据访问列和表的 TTL列TTL表TTL删除数据使用多个块设备进行数据存储配置虚拟列资料分享系列文章clickhouse系列文章 Clickhouse中最强大的 阅读全文
posted @ 2022-11-03 18:22 张飞的猪 阅读(831) 评论(0) 推荐(0) 编辑
摘要:目录合并树家族日志引擎系列集成的表引擎其他特殊的引擎资料分享系列文章clickhouse系列文章 目前ClickHouse的表引擎主要有下面四个系列,合并树家族、日志引擎系列、集成的表引擎和其他特殊的引擎。 合并树家族 Clickhouse中最强大的表引擎当属MergeTree(合并树)引擎及该系列 阅读全文
posted @ 2022-10-24 19:44 张飞的猪 阅读(354) 评论(0) 推荐(0) 编辑
摘要:目录Atomic建表语句特性Table UUIDRENAME TABLESDROP/DETACH TABLESEXCHANGE TABLESReplicatedMergeTree in Atomic DatabaseMySQL创建数据库mysql与ClickHouse数据类型对应使用例子Postgr 阅读全文
posted @ 2022-10-09 11:57 张飞的猪 阅读(823) 评论(0) 推荐(0) 编辑
摘要:目录当前服务器上创建表(单节点)语法形式使用显式架构从相同结构的表复制创建从表函数创建从选择查询创建分布式集群创建表临时表分区表创建表语句关键字解析空值或非空修饰符默认值表达式一般表达式物化表达式临时表达式别名表达式主键约束数据TTL列级别TTL表级别TTLclickhouse压缩与编码列压缩目前c 阅读全文
posted @ 2022-09-19 19:33 张飞的猪 阅读(2451) 评论(0) 推荐(0) 编辑
摘要:目录基础类型数值类型IntFloatDecimal字符串类型StringFixedStringUUID时间类型DateTimeDateTime64Date复合类型数组Array元组Tuple枚举Enum嵌套Nested特殊数据类型NullableDomainClickHouse相关资料分享系列文章c 阅读全文
posted @ 2022-09-03 20:26 张飞的猪 阅读(1285) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示