精选文章
元数据管理落地实施流程方案(增强版)
适用对象:数据治理专员、元数据平台开发、数仓工程师核心原则:先核心后边缘、先自动后人工、先绑定后扩展目标:6个月内实现核心业务域元数据覆盖率 ≥90%,血缘准确率 ≥95%
🧭 总体流程图(5大阶段)
数仓建模工具包(增强版)
适用对象:数据开发、数仓工程师、数据产品经理
📎 1. 《DWD七步法 Checklist.xlsx》(增强版)
用途:指导新人从 ODS 到 DWD 表的完整建模流程使用方式:每建一张 DWD 表,填写一份 Checklist
步骤任务是否完成负责人...
数仓建模落地实施流程方案(增强版)
适用对象:数据开发、数仓工程师、数据产品经理技术栈:Doris + DolphinScheduler + CDC 实时入仓(10s Checkpoint)约束条件:
无历史分区,只维护当前最新全量
每小时调度,串行执行(内存有限)
所有查询/导出必须...
大数据数仓建模体系(完整增强版)
适用场景:企业资质评估、客户分层、销售跟进、资源匹配核心实体:企业、联系人、联系方式、专利、软著、标签、来源等技术栈:Doris + CDC 实时入仓(10s) + DolphinScheduler约束条件:
无历史分区,仅维护当前最新全量状态
所有查询/...
数据治理规则管理方案
一、概述
元数据管理和数据质量规则管理是数据治理中紧密衔接的两个核心环节。元数据管理提供了数据的“描述信息”(如业务含义、技术属性),而数据治理规则管理则基于这些信息,指定具体的校验逻辑,确保数据符合预期标准。
示例:
元数据管理的输出:
业务...