从零开始学TiDB(6)深入学习Placement Driver(PD)

ops/2024/12/23 5:58:22/

一.PD整体架构

PD的功能:

  1. 元数据的存储(解决执行计划如何得知去哪个region中获取数据)
  2. 全局时钟:查询开始时间,事务开始,结束的时间。
  3. 分配全局ID和事务ID
  4. 对region进行调度(热点region的调度处理)
  5. 提供label,支持高可用
  6. 提供TiDB Dashboard

1.PD 的路由功能 

要想知道ledaer region在哪个TIKV,这时候需要问PD节点

但这时候有可能 根据region Cache获取的 leader region有误(可能由于热点region调度,也可能由于region分裂)。这时候请求TiKV 会返回信息,region不在这个TiKV上,在其它节点,TiKV Client再访问其它节点,并更新region cache。 这个过程叫Back off

2.PD的TSO分配

TSO (physical time local time) 课程里是叫这个名字。但很奇怪,为什么官网文档TSO的命名是TimeStamp Oracle??

 什么是TSO?

 TSO的分配

首先TSO的分配涉及到TiDB Server 和 PD组件

但如果此时TSO有一百个请求,PD Client不会 一次次的请求PD,则PD Client会把这一百个请求变成一个批处理请求发送给PD

相关优化:

PD leader解决性能问题的方法

PD 的高可用

如果此时TiDB Server请求的是704

此时PD ledaer宕机,则切换leader PD,开始一次新的3s计时(即TiDBServer 请求的TSO会有断层,代表此时PD leader 宕机了) ,即保证不了连续性。

 

三.调度

1.信息调度 

 

2.生成调度 

PD 会关注下面的信息,生成调度(operator)。

3.执行调度 

PD把调度信息直接发送给region,让region拿着operator 进行调度

四.Label

如果多个region同时失效,则可能会导致数据丢失,这时候可以认为的调整region的分布。这时候需要用到Label。这和Oceanbase 的Zone的逻辑概念有些类似。

给region打标签需要配置两个组件,分别是TiKV 和PD

给region打标签后PD就知道region在哪个数据中心,哪个机房的哪个机架。

 

 


http://www.ppmy.cn/ops/144236.html

相关文章

【力扣算法】203.移除链表元素

在对链表进行操作的时候,可以考虑添加虚拟头结点 1. 虚拟头结点 设置虚拟头结点,让头结点的next指向head class Solution{public ListNode removeElements(ListNode head,int val){ListNode pre new ListNode();pre.next head;ListNode index pre;w…

使用Python实现量子密钥分发:构建安全通信的未来

量子密钥分发(Quantum Key Distribution, QKD)是一种利用量子力学原理进行密钥分发的方法,能够实现无条件安全的密钥传输。QKD是量子通信中的重要应用,通过量子比特(qubits)的传输和测量,实现安…

【LeetCode】9、回文数

【LeetCode】9、回文数 文章目录 一、数学: 除法和取模1.1 数学: 除法和取模 二、多语言解法 一、数学: 除法和取模 1.1 数学: 除法和取模 例如 15251, offset 也是五位数的 10000 先判断首1和尾1, 再变为 525, offset 变为 100 再判断首5和尾5, 再变为 2, offset 变为 1 整个…

linux系统编程(五)

1、信号 信号是事件发生时对进程的通知机制,针对每个信号都定义了一个唯一的整数,这些整数定义在signal.h中。 常见信号如下: SIGABRT:进程调用abort函数,系统向进程发送此信号,终止进程并产生核心转储文…

Telegram bot Mini-App开发实践---Telegram简单介绍与初始化小程序获取window.Telegram.WebApp对象并解析

➡️【好看的灵魂千篇一律,有趣的鲲志一百六七!】- 欢迎认识我~~ 作者:鲲志说 (公众号、B站同名,视频号:鲲志说996) 科技博主:极星会 星辉大使 后端研发:java、go、python、TS,前电商、现web3 主理人:COC杭州开发者社区主理人 、周周黑客松杭州主理人、 AI爱好…

Hive其五,使用技巧,数据查询,日志以及复杂类型的使用

目录 一、关于Hive使用的一些技巧 二、表的数据查询 三、Hive默认的日志 四、复杂数据类型 1、Array的使用 2、展开函数的使用 explode 3、Map的使用 4、Struct结构体 一、关于Hive使用的一些技巧 1、可以直接不进入hive的情况下执行sql语句 通过shell的参数 -e 可以执…

图片和媒体资源的优化:提升Web应用性能与用户体验的关键

文章目录 前言一、为什么需要优化图片和媒体资源二、图片优化策略三、媒体资源优化策略四、案例研究:实际效果展示结语 前言 在现代Web开发中,图片和媒体资源(如音频、视频)的质量和加载速度对用户体验有着直接影响。高质量的媒体…

【模型对比】ChatGPT vs Kimi vs 文心一言那个更好用?数据详细解析,找出最适合你的AI辅助工具!

【终极对决】ChatGPT vs Kimi vs 文心一言:哪款AI助手才是你的最佳选择?详尽指南在此! 在当今人工智能(AI)迅猛发展的时代,AI聊天助手已深度融入我们的工作与生活。然而,面对市面上诸多选择——…