Pengenalan Konsep Data Processing Pipelines
Pipelines adalah bagian dasar dari setiap data processing, dibuat oleh data engineer untuk “memindahkan” data dari satu point ke point yang lain. Secara konsep abstrak, terdapat empat stages data pipelines: Ingestion Adalah tahap memindahkan data kedalam data processing system. Data pada tahap ini sangat variatif, bisa dari berbagai sumber dan berbagai format. Tujuan akhir dari … Read more