数据工程

dbt 数据分析工程实战教程(汇总篇)最近陆续写了数据分析工程相关的系列博客，主要包括dbt-core相关的实战教程。本文是阶段性整理回顾，希望为你学习数据工程领域知识提供帮助，后续会持续更新。

理解dbt artifacts及其实际应用dbt是数据分析领域的一种变革性工具，它使数据专业人员能够对仓库中的数据进行转换和建模。它的强大功能之一是生成dbt artifacts：dbt运行的结构化输出，提供对dbt项目及其操作的深入了解。

Dbt增量策略模型实践指南参考：dbt Incremental Strategies | Indicium Engineering (medium.com)

DBT hook 实战教程本文将介绍dbt中在模型和seed级别使用post-hook的几个具体示例。dbt中的Post-hooks是一个强大而简单的特性，它在构建模型之后(如果是pre-hook，甚至在此之前)执行SQL语句。这些语句实际上(几乎)可以是任何东西，从将表复制到另一个数据库/模式，或限制记录的数量，或重新格式化seed。我们将讨论的示例是指DuckDB，但是也可以适用于其他数据库。

数据异质性与数据异构性的本质和举例说明🍉 CSDN 叶庭云：https://yetingyun.blog.csdn.net/在现代数据科学与信息技术领域，“数据异质性” 与 “数据异构性” 是两个常见的概念。对于初学者而言，明确这两个概念的本质及其间的差异至关重要。本文旨在以简明易懂的方式，分别阐述这两个概念，并辅以实例，助您深入掌握。

dbt seed 命令及应用示例DBT-core是一个命令行工具，它使数据分析师和工程师能够更有效地转换仓库中的数据。dbt的一个强大特性是seed命令，它可以将CSV文件(称为“seed”)加载到数据仓库中。本教程将带你完成使用dbt seed命令的过程。

Large Scale Data Engineering EMATM0051

数字化营销工兵

微软如何打造数字零售力航母系列科普11 - 什么是Microsoft Fabric中的数据工程？目录1. Lakehouse(湖边小屋)2. Apache Spark Job Definition (作业定义)

Data-Engineering with DatabricksData-EngineeringThe first step in enabling reproducible analytics and ML is to ingest diverse data from various sources, including structured and unstructured data, real-time streams, and batch processing. This requires an understanding of data ingestion