最新 最热

大数据ClickHouse(十二):MergeTree系列表引擎之CollapsingMergeTree

CollapsingMergeTree就是一种通过以增代删的思路,支持行级数据修改和删除的表引擎。它通过定义一个sign标记位字段,记录数据行的状态。如果sign标记为1,则表示这是一行有效的数据;如果sign标记为-1,则表示这行数据需要被删...

2022-08-28
2

大数据ClickHouse(三):客户端命令行参数

我们可以通过clickhouse client来连接启动的clickhouse服务,连接服务时,我们可以指定以下参数,这里指定的参数会覆盖默认值和配置文件中的配置。

2022-08-27
2

大数据ClickHouse(十一):MergeTree系列表引擎之AggregatingMergeTree

该表引擎继承自MergeTree,可以使用 AggregatingMergeTree 表来做增量数据统计聚合。如果要按一组规则来合并减少行数,则使用 AggregatingMergeTree 是合适的。AggregatingMergeTree是通过预先定义的聚合函数计算数据并...

2022-08-27
2

大数据ClickHouse(十):MergeTree系列表引擎之SummingMergeTree

该引擎继承了MergeTree引擎,当合并 SummingMergeTree 表的数据片段时,ClickHouse 会把所有具有相同主键的行合并为一行,该行包含了被合并的行中具有数值数据类型的列的汇总值,即如果存在重复的数据,会对对这些重复的数据进...

2022-08-26
7

大数据ClickHouse(九):MergeTree系列表引擎之ReplacingMergeTree

以上MergeTree不能对相同主键的数据进行去重,ClickHouse提供了ReplacingMergeTree引擎,可以针对同分区内相同主键的数据进行去重,它能够在合并分区时删除重复的数据。值得注意的是,ReplacingMergeTree只是在一定程度上解...

2022-08-25
6

详解clickhouse分区目录的合并过程

MergeTree的分区目录和传统意义上其他数据库有所不同。MergeTree的分区目录并不是在数据表被创建之后就存在的,而是在数据写入过程中被创建的。也就是说如果一张数据表没有任何数据,那么也不会有任何分区目录存在。Merg...

2022-04-25
2

clickhouse表引擎学习

MergeTree是clickhouse最强大的引擎。其主要特点:1:存储的数据按主键排序2:支持数据分区3:支持数据副本4:支持数据采样5:支持ttl下面我们来建一个表test_mergetree,表数据只保留一个月下面的就是例子...

2022-04-25
2

ClickHouse不同引擎大比拼

这个引擎是 ClickHouse 的重头戏,它支持一个日期和一组主键的两层式索引,还可以实时更新数据。同时,索引的粒度可以自定义,外加直接支持采样功能。...

2022-03-28
2

Flink 实践教程:进阶3-窗口操作

流计算 Oceanus 是大数据产品生态体系的实时化分析利器,是基于 Apache Flink 构建的具备一站开发、无缝连接、亚秒延时、低廉成本、安全稳定等特点的企业级实时大数据分析平台。流计算 Oceanus 以实现企业数据价值最大...

2021-12-22
2