中国城商行信贷业务数仓建设白皮书(第三期:数据治理体系深度实践)

devtools/2025/2/7 1:28:32/

一、多级数据血缘分域管控方案

1.1 血缘分级模型

构建"五级数据血缘图谱"管理体系:

业务系统源端

贴源层

数据标准层

主题模型层

指标服务层

监管报送层

元数据属性扩展:

<ColumnMeta> <Name>loan_amt</Name> <DataType>DECIMAL(18,2)</DataType> <BusinessTerm>贷款金额</BusinessTerm> <DataSteward>张伟(风险管理部)</DataSteward> <SensitiveLevel>P3(重要)</SensitiveLevel> <LineagePath>CMBS_CORE.T_LOAN->ODS_LOAN.AMT->DWD_LOAN.AMT->RISK_MODEL.INPUT</LineagePath>
</ColumnMeta>
1.2 生命周期治理

采用"SADL"模型管理数据时效性:

S(热数据)A(温数据)D(归档数据)L(法律数据)
存储时长<30天30-365天1-5年≥5年
访问频率1000+次/日100-999次/日≤10次/日<1次/月
存储成本¥12.8/GB/月

http://www.ppmy.cn/devtools/156667.html

相关文章

力扣-哈希表-349 两个数组的交集

思路 把第一个数组转换成set&#xff0c;然后遍历第二个数组判断是否在set中存在 代码 class Solution { public:vector<int> intersection(vector<int>& nums1, vector<int>& nums2) {unordered_set<int> result_set;unordered_set<int…

毕业设计:基于卷积神经网络的鲜花花卉种类检测算法研究

目录 前言 课题背景和意义 实现技术思路 一、算法理论基础 1.1 卷积神经网络 1.2目标检测算法 二、 数据集 2.1 数据集 2.2 数据扩充 三、实验及结果分析 3.1 实验环境搭建 3.2 模型训练 最后 前言 &#x1f4c5;大四是整个大学期间最忙碌的时光,一边要忙着备考或…

vue3中el-input无法获得焦点的问题

文章目录 现象两次nextTick()加setTimeout()解决结论 现象 el-input被外层div包裹了&#xff0c;设置autofocus不起作用&#xff1a; <el-dialog v-model"visible" :title"title" :append-to-bodytrue width"50%"><el-form v-model&q…

openeuler 22.03 lts sp4 使用 cri-o 和 静态 pod 的方式部署 k8s-v1.32.0 高可用集群

前情提要 整篇文章会非常的长…可以选择性阅读,另外,这篇文章是自己学习使用的,用于生产,还请三思和斟酌 静态 pod 的部署方式和二进制部署的方式是差不多的,区别在于 master 组件的管理方式是 kubectl 还是 systemctl有 kubeadm 工具,为什么还要用静态 pod 的方式部署?…

linux——网络(服务器的永久不挂——守护进程)

文章目录 目录 文章目录 前言 一、前后台进程 1. 前台进程 (Foreground Process) 2. 后台进程 (Background Process) 3. 前后台进程的切换 4. 关键命令和操作 5. 注意事项 6. 信号处理 二、守护进程 1. 守护进程的核心特点 2. 常见守护进程示例 3.接口介绍 1、 fork() 2. sets…

深度学习|表示学习|卷积神经网络|NIN 相比普通 CNN|17

如是我闻&#xff1a; Network in Network (NIN) 是 2014 年由 Min Lin 等人 提出的一个改进 CNN 结构的模型。它的核心思想是&#xff1a;用小型的多层感知机&#xff08;MLP&#xff0c;Multi-Layer Perceptron&#xff09;替代传统 CNN 中的卷积层&#xff0c;从而提高网络的…

powershell编写一个简易的http服务器httpServer

文章目录 powershell一键启动检查相关进程 源码 powershell一键启动 一键启动脚本内容(powershell,兼容windows powershell和powershell7) irm https://gitee.com/xuchaoxin1375/scripts/raw/main/PS/Tools/Tools.psm1|iex sleep 0.5 help Start-HTTPServer #可以指定参数选择…

Rust场景示例:为什么要使用切片类型

通过对比 不用切片 和 使用切片 的场景&#xff0c;说明切片类型在 Rust 中的必要性&#xff1a; 场景&#xff1a;提取字符串中的单词 假设我们需要编写一个函数&#xff0c;从一个句子中提取第一个单词。我们将分别展示 不用切片 和 使用切片 的实现&#xff0c;并对比二者的…