Skip to content

adikazahran/ETL-Pipeline

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

3 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

𓆉 ETL Pipeline Project

Selamat datang di proyek ETL Pipeline ini! Repositori ini berisi skrip Python untuk melakukan proses Extract, Transform, dan Load (ETL) data ke berbagai tujuan seperti file CSV, Google Sheets, dan PostgreSQL.


📌 Fitur Utama

  • Ekstraksi data dari sumber data tertentu.
  • Transformasi data sesuai kebutuhan analisis atau integrasi.
  • Memuat data ke:
    • File CSV
    • Google Sheets
    • PostgreSQL

🛠️ Instalasi Dependencies

Sebelum menjalankan skrip, pastikan semua dependensi sudah terinstal. Gunakan perintah berikut:

pip install -r requirements.txt

🚀 Cara Menjalankan Skrip ETL Pipeline

python main.py

🚀 Cara Menjalankan Unit Test dan Coverage

python -m pytest tests/ --cov=utils --cov-report=html -v

🔗 URL Link SpreadSheets

https://docs.google.com/spreadsheets/d/18q9P9ke5xo03Z1ofVJQNmwEoIdj8sK9x8086dfrMK5w/edit?usp=sharing

👇 Untuk melihat semua langkah repo dari CSV, Spreadsheets, PostgreSQL Ada di file load.py dan main.py

About

Membangun ETL Pipeline (Extract, Transform, Load)

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published