精选文章
数仓建模落地实施流程方案(增强版)
适用对象:数据开发、数仓工程师、数据产品经理技术栈:Doris + DolphinScheduler + CDC 实时入仓(10s Checkpoint)约束条件:
无历史分区,只维护当前最新全量
每小时调度,串行执行(内存有限)
所有查询/导出必须...
大数据数仓建模体系(完整增强版)
适用场景:企业资质评估、客户分层、销售跟进、资源匹配核心实体:企业、联系人、联系方式、专利、软著、标签、来源等技术栈:Doris + CDC 实时入仓(10s) + DolphinScheduler约束条件:
无历史分区,仅维护当前最新全量状态
所有查询/...
数据治理规则管理方案
一、概述
元数据管理和数据质量规则管理是数据治理中紧密衔接的两个核心环节。元数据管理提供了数据的“描述信息”(如业务含义、技术属性),而数据治理规则管理则基于这些信息,指定具体的校验逻辑,确保数据符合预期标准。
示例:
元数据管理的输出:
业务...