desafio2 prof artemisia

Tantangan2-Prof-Artemisia

Keterangan:

Proyek ini dikembangkan sebagai bagian dari mentor yang saya dapatkan. Tujuannya adalah untuk memuat data cloud setelah dirawat dengan benar sehingga dapat diakses oleh alat BI.

Fitur:

• Pemrosesan data dari dataset format .csv
• Transformasi data dengan pembersihan, standardisasi dan pengayaan di SQL, awalnya di bank lokal (Postgres).
• Pembuatan datalake di cloud, dengan lapisan: mentah, perak, emas dan berlian.
• Konsumsi data melalui alat BI.

Instalasi:

1. Klon Repositori ini:

   git clone https://github.com/DaviMacielCavalcante/desafio2-prof-artemisia
   cd desafio2-prof-artemisia

2. Unduh file indexData.csv dari tautan ini https://www.kaggle.com/datasets/mattiuzc/stock-exchange-data
3. Pada akar proyek, buat direktori yang disebut "dataset", dan letakkan file indexData.csv di dalamnya.

• Saya merekomendasikan membersihkan file .csv yang ada di lapisan datalake, hanya untuk memiliki pengalaman melihat semuanya terjadi atau mengubah skrip seperti yang Anda inginkan.

4. Jalankan skrip yang bertanggung jawab untuk membuat lapisan perak:

   python preparando_camada_silver.py

5. Lalu lapisan emas:

 python preparando_camada_gold.py

7. Akhirnya, lapisan berlian:

 python preparando_camada_diamond.py

8. Pendakian ke awan:
   • Buat akun AWS;
   • Ikuti tutorial ini di AWS Latam untuk mendaki datalake:

   https://youtube.com/playlist ? list=PLQHh55hXC4yrBZ4yookmQPlX2zM9dZ-MH & si=lpGE6Hz2F6t37THw

   • Jika Anda ingin terhubung ke Power BI, ikuti tutorial ini:

    https://youtu.be/WS3LUbK0ung ? si=YXc_Wy5j53Ct34z3

9. Lanjutkan di jalur hukum hukum:

Bagaimana berkontribusi:

Kontribusi dipersilakan! Silakan ikuti panduan ini:

• Ambil garpu proyek.
• Buat cabang untuk fungsionalitas yang ingin Anda terapkan (git checkout -B my-nova-fitur).
• Buat komitmen dengan deskripsi yang baik (git commit -m 'menambahkan fitur baru').
• Buat dorongan ke cabang yang dibuat (Git Push Origin-fitur-saya).
• Buka tarikan permintaan untuk ditinjau.

Lisensi

Proyek ini dilisensikan di bawah lisensi MIT - lihat file lisensi.md untuk lebih jelasnya.

Kontak

Jika Anda memiliki pertanyaan atau masalah, silakan hubungi kami:

E-mail: [email protected]

Lordes Sith yang bertanggung jawab atas proyek ini

• Darth David ⚔️?

Mentor yang mengusulkan tantangan:

Profa. Artemisia Weyl

Mentor Github: https://github.com/arteweyl

Melalui kemenangan, rantai saya rusak.
Pasukan akan membebaskan saya.