23 9 月
大数据
Posted by

数仓建模体系01

问题：基于上面的讨论，帮我输出一个完整版本的数据建模体系，包含每一层做的具体工作，比如ods到dwd做数据清洗、退化等 列出具体事项 以下是为你量身定制的 高企咨询服务场景下的完整离线数仓建模体系，覆盖从 ODS → DWD → DWS → DWT → ADS 的...
继续阅读
23 9 月
大数据
Posted by

dwd层建模思考03

问题：我有个思路为什么不能添加dwt层主题层，在主题层中，将dws层轻度聚合的数据进行拼接。比如dwt层company表 字段有：专利数、软著数、联系人数、联系方式数、不同类型联系方式数等。这些字段都来自dws层。在ads层 只需要结合dwd层和dwt层 针对不同的需求...
继续阅读
23 9 月
大数据
Posted by

dwd层建模思考02

问题：关于，联系人表和联系方式表dwd层：一个企业有多个联系人，一个联系人有多个联系方式，一个联系方式有多个采集来源，以及多个联系方式标签标注这个联系方式有效、空号、非本公司等。按照上面的理论，这样该如何做dwd层 🎯 一、业务关系梳理（实体与粒度） 你描述...
继续阅读
23 9 月
大数据
Posted by

dwd层建模思考01

问题：当前离线数仓dwd层建模 基本上都是按照ods贴源层的数据，去掉逻辑删除的的数据。表字段保持不变，另外也只是添加了字典码值。感觉这模型层的构建太简单了，不成体系。 一、DWD 层的核心价值 DWD 层不是“ODS 去删 + 加码值”，而是： ✅ ...
继续阅读
18 8 月
大数据
Posted by

llama.cpp使用

一、llama.cpp的下载与编译 llama.cpp可以帮助我们转化模型为gguf格式、对模型进行量化以及进行模型推理等功能。 llama.cpp Github仓库：https://github.com/ggerganov/llama.cpp 1、下...
继续阅读