ClickHouse之更新表(ReplicatedReplacingMergeTree)

server/2024/10/9 10:56:32/

CK没有更新的方法,但是有一种引擎可以支持去重,它就是ReplicatedReplacingMergeTree;

一种是手工执行optimize table;

另一种是table后面加final关键字;

如何设置去重?
需要指定order key;注意不是primary key;
但是,如果同一order key散落到了不同的分区、不同的分片中,去重会失效;
换言之,只能自动合并同一分区,同一分片的相同ID;
同一个order key要保留哪个?
在本地表最后一个参数上加上一个时间戳;CK会自动取最新的;

CREATE TABLE default.test
(
ID String COMMENT ‘主键编号’,
NAME Nullable(String) COMMENT ‘名称’,
CRT_TIMEDateTime COMMENT '创建时间', TIMESTAMP` Int64
)
ENGINE = ReplicatedReplacingMergeTree(‘/clickhouse/tables/01/test/’,
‘replica101’,
TIMESTAMP)
PARTITION BY toMonth(CRT_TIME)
ORDER BY TIMESTAMP
SETTINGS index_granularity = 8192;

属性介绍:
ENGINE:表引擎,最常用的是MergeTree,或者说MergeTree家族的各个引擎,当然也可以选择其他引擎。但是,只有MergeTree系列的表引擎才支持主键索引,数据分区,数据副本,数据采样这样的特性,只有此系列的表引擎才支持alter操作。
PARTITION BY:指定分区键,主要根据你的业务场景和数据量大小,可以按年、按月、按天或者其他时间间隔分区,也可以按照哈希去分区。当然,若不声明分区键,则clickhouse会生成一个名为all的分区
ORDER BY:排序字段,clickhouse表会根据排序字段建索引,方便快速查找。如果没有指定主键,排序字段就是主键
PRIMARY KEY:指定主键,它必须是分区键的前缀,或者等于分区键
SETTINGS:配置项,可以把一些配置在这里设置,多个逗号分割
index_granularity:默认8192,表示索引的粒度,即MergeTree的索引在默认情况下,每间隔8192行才生成一个索引。通常不需要修改此参数,不设置就是8192。
old_parts_lifetime:已合并的分区块,多久后删除,默认8分钟


http://www.ppmy.cn/server/129230.html

相关文章

mount 挂载用法

用法&#xff1a; mount [-lhV] mount -a [选项] mount [选项] [--source] <源> | [--target] <目录> mount [选项] <源> <目录> mount <操作> <挂载点> [<目标>] 选项&#xff1a; -a, --all 挂载 fstab 中的…

【C/C++】错题记录(六)

题目一 e前必须有数字&#xff0c;e后必须为整数。 并不完全按照科学计数法的规定来&#xff08;e前的数字可以任意大小&#xff0c;并不是只能是大于等于1小于10&#xff09;。 题目二 C不支持嵌套函数定义。 在 C中&#xff0c;函数的定义必须在全局作用域或者类作用域中进…

ts类型体操-简单篇

介绍下type challenge中几道简单的类型体操。涉及的知识点主要是&#xff1a;映射类型、 条件类型、联合类型的分布式、infer R等。 1、实现pick 不使用 Pick<T, K> &#xff0c;实现 TS 内置的 Pick<T, K> 的功能。 从类型 T 中选出符合 K 的属性&#xff0c;构…

单片机原理与技术

文章目录 一、单片机概述二、单片机的基本原理1. **硬件结构**2. **指令系统** 三、单片机的关键技术1. **编程技术**2. **接口技术**3. **嵌入式系统技术** 四、单片机在现代科技中的应用 一、单片机概述 单片机&#xff0c;全称为单片微型计算机&#xff08;Single-Chip Mic…

【吊打面试官系列-MySQL面试题】说说对 SQL 语句优化有哪些方法?

大家好&#xff0c;我是锋哥。今天分享关于【说说对 SQL 语句优化有哪些方法&#xff1f;】面试题&#xff0c;希望对大家有帮助&#xff1b; 说说对 SQL 语句优化有哪些方法&#xff1f; 1000道 互联网大厂Java工程师 精选面试题-Java资源分享网 1、Where 子句中&#xff1a;…

使用 Maven 与 Spring Boot 集成的详细指南

一、Maven 简介 Maven 是一个基于 POM&#xff08;Project Object Model&#xff09;的项目管理工具&#xff0c;它提供了以下功能&#xff1a; 依赖管理&#xff1a;Maven 可以轻松地管理项目所需的第三方库&#xff0c;并能自动解决库之间的依赖关系。构建自动化&#xff1…

基于STM32设计的智能学习台灯(华为云IOT)(238)

文章目录 一、前言1.1 项目介绍【1】开发背景【2】项目实现的功能【3】项目硬件模块组成【4】ESP8266工作模式配置1.2 设计思路【1】整体设计思路【2】整体构架【3】上位机开发思路1.3 项目开发背景【1】选题的意义【2】可行性分析【3】参考文献【4】摘要1.4 开发工具的选择【1…

MySQL 修改数据的语句

在 MySQL 中&#xff0c;修改数据的语句主要使用 UPDATE 语句。UPDATE 语句允许你更新表中已存在的记录。以下是一个基本的 UPDATE 语句的语法和示例&#xff1a; 语法 UPDATE 表名 SET 列1 值1, 列2 值2, ... WHERE 条件;示例 假设有一个名为 employees 的表&#xff0c;…