ETL 和 ELT区别-2

T-ETL和ELT区别_tetl-CSDN博客

ETL(提取、转换和加载)和 ELT(提取、加载和转换)是企业用来从多个源提取数据并将其组合到单个数据库或数据仓库中进行分析的过程。这两种方法都使用以下步骤(但顺序不同)来准备数据以进行分析:

  • 提取:此步骤涉及从源中提取数据,源可以是 MySQL 或 MongoDB 等数据库,也可以是 Google 表格、Google Drive 或 Salesforce 等任何其他应用程序。

  • 加载:在此步骤中,数据将加载到分析工作负载的目标仓库或数据库。

  • 转换:此步骤可用于清理、处理数据并将其转换为适合加载到目标和进一步分析的格式。

ETL ELT
数据转型 原始数据在加载到目标之前进行转换。 原始数据在加载到目标后进行转换。
加载时间 ETL 需要更多时间将数据加载到目标,因为数据首先被转换。 ELT 速度更快,因为数据直接加载到目标。
数据量 更适合需要非常复杂转换的小型数据集。 非常适合更强调获取实时数据进行分析的大型数据集。

一些新的词汇

in-flight-transformations

提取或加载过程中自动转换源数据

Schema Mapper

结构映射器:

hevodata 的 event 和 event-type

从源中获取数据称为 Hevo 中的事件摄取,而将摄取的数据复制到目标中称为事件的加载。每个 Hevo 计划每月提供固定数量的活动。读取事件用法

如何管理过程中的事件Managing Objects in Pipelines - Hevo Data

Schema Mapper Actions

  • 跳过了一行数据
  • 重置了数仓结构
  • 发现没有绑定的字段
相关推荐
Gain_chance4 小时前
34-学习笔记尚硅谷数仓搭建-DWS层最近一日汇总表建表语句汇总
数据仓库·hive·笔记·学习·datagrip
Gain_chance5 小时前
36-学习笔记尚硅谷数仓搭建-DWS层数据装载脚本
大数据·数据仓库·笔记·学习
Gain_chance6 小时前
35-学习笔记尚硅谷数仓搭建-DWS层最近n日汇总表及历史至今汇总表建表语句
数据库·数据仓库·hive·笔记·学习
心疼你的一切1 天前
解密CANN仓库:AIGC的算力底座、关键应用与API实战解析
数据仓库·深度学习·aigc·cann
十月南城1 天前
Hive与离线数仓方法论——分层建模、分区与桶的取舍与查询代价
数据仓库·hive·hadoop
AI架构师小马1 天前
Hive调优手册:从入门到精通的完整指南
数据仓库·hive·hadoop·ai
Gain_chance1 天前
33-学习笔记尚硅谷数仓搭建-DWS层交易域用户粒度订单表分析及设计代码
数据库·数据仓库·hive·笔记·学习·datagrip
心疼你的一切2 天前
昇腾CANN实战落地:从智慧城市到AIGC,解锁五大行业AI应用的算力密码
数据仓库·人工智能·深度学习·aigc·智慧城市·cann
心疼你的一切2 天前
基于CANN仓库打造轻量级AIGC:一键生成图片语义描述
数据仓库·aigc·cann
AC赳赳老秦2 天前
代码生成超越 GPT-4:DeepSeek-V4 编程任务实战与 2026 开发者效率提升指南
数据库·数据仓库·人工智能·科技·rabbitmq·memcache·deepseek