Apa Itu Data Pipeline? Definisi & Penjelasan

Data Pipeline adalah serangkaian langkah pemrosesan data. Saluran data mentransfer data dari satu tempat ke tempat lain, dari sumber (seperti database aplikasi) ke tujuan (seperti data warehouse) dengan langkah-langkah transformasi di antaranya.

Konteks Penggunaan

ETL (Extract, Transform, Load).

Contoh

Mengambil log klik user dari web -> bersihkan data sampah -> simpan ke tabel analisis harian.

Catatan

Tools: Apache Airflow, Kafka.