ETL

Definicja

Klasyczny paradygmat przepływu danych: ekstrakcja ze źródła, transformacja w warstwie pośredniej, ładowanie do systemu docelowego. ETL dominował w epoce on-premise Data Warehouses, gdy transformacja przy ładowaniu była najszybszą metodą uniknięcia obciążenia systemu docelowego.

Zastosowanie biznesowe

Klasyczny use case: dane z ERP trafiają do staging area, tam są czyszczone i łączone z danymi z CRM, a finalnie ładowane do hurtowni w formie gotowej do raportowania. Proces uruchamia się co noc.

Powiązane pojęcia

• ELT
• Data Pipeline
• Airflow