大数据
datax同步doris到tidb出现15分钟断开问题
问题现象:使用datax指定doris数据源写入到tidb,数据同步15分钟就提示SELECT 查询timeout,查询Doris FE BE timeout都没有类似timeout key 并且value 900开头的配置,最后查询
query_timeout输...
主题域模型与数仓建模中根据业务过程建模划分的业务域差异
在企业数据架构中,主题域模型(Subject Area Model)与数仓业务过程建模中的业务域(Business Domain)虽然都涉及数据分类,但两者的设计目标、划分依据和应用场景存在本质差异。以下是详细对比分析:
1. 核心区别对比表
维度主题域模型...
dolphinscheduler执行记录清理
打开任务实例记录较慢
清理:t_ds_process_instance 以及 t_ds_task_instance
Flink集成MyBatis-Flex与Druid示例
下面是一个完整的 Flink 作业示例,集成了 MyBatis-Flex 和 Druid 数据源,并在 RichFunction 中使用 Mapper 进行数据查询。
项目依赖 (pom.xml)首先确保你的项目包含以下依赖:
SQL解析工具sqllineage使用教程
python第三方包,该工具主要用于dml语句中表级血缘关系,字段级血缘关系的解析