Słownik · litera D
Data Pipeline
Zautomatyzowany przepływ danych od źródła do celu
Definicja
Ciąg automatycznych kroków, które pobierają dane ze źródeł (systemy, API, pliki), przetwarzają je (filtrowanie, łączenie, transformacja) i ładują do systemu docelowego (hurtownia, raport, model). Dobry data pipeline działa bez nadzoru człowieka i samodzielnie raportuje błędy.
Zastosowanie biznesowe
Firma e-commerce potrzebuje nocnego pipeline'u, który pobiera dane sprzedażowe z platformy sklepowej, dane zwrotów z CRM, dane magazynowe z WMS, łączy je i ładuje do hurtowni. Rano dyrektor sprzedaży widzi dashboard z KPI — bez udziału analityka.