desafio2 prof artemisia

Challenge2-Prof-Artemisia

Описание:

Этот проект был разработан как часть наставника, который я получаю. Цель состоит в том, чтобы загрузить облачные данные после правильного обработки, чтобы они были доступны для инструментов BI.

Функции:

• Обработка данных из набора данных формата .csv
• Преобразование данных с помощью очистки, стандартизации и обогащения в SQL, первоначально в местном банке (Postgres).
• Создание данных в облаке, со слоями: сырой, серебро, золото и алмаз.
• Потребление данных через инструмент BI.

Установка:

1. Клонировать это хранилище:

   git clone https://github.com/DaviMacielCavalcante/desafio2-prof-artemisia
   cd desafio2-prof-artemisia

2. Загрузите файл indexData.csv этой ссылки https://www.kaggle.com/datasets/mattiuzc/stock-exchange-data
3. В корне проекта создайте каталог, называемый «Наборы данных», и поместите в него файл indexData.csv .

• Я рекомендую очистить файлы .csv , присутствующие в слоях данных, просто чтобы увидеть, как все происходит, или изменить сценарии так, как вы предпочитаете.

4. Запустите сценарий, который отвечает за создание серебряного слоя:

   python preparando_camada_silver.py

5. Затем золотой слой:

 python preparando_camada_gold.py

7. Наконец, слой алмаза:

 python preparando_camada_diamond.py

8. Подниматься в облако:
   • Создать учетную запись AWS;
   • Следуйте этому уроку в AWS Latam, чтобы подняться на DataLake:

   https://youtube.com/playlist ? list=PLQHh55hXC4yrBZ4yookmQPlX2zM9dZ-MH & si=lpGE6Hz2F6t37THw

   • Если вы хотите подключиться к Power BI, следуйте этому уроку:

    https://youtu.be/WS3LUbK0ung ? si=YXc_Wy5j53Ct34z3

9. Продолжить юридический путь силы:

Как внести свой вклад:

Взносы приветствуются! Пожалуйста, следуйте этим рекомендациям:

• Возьмите вилку проекта.
• Создайте филиал для функциональности, которую вы хотите реализовать (GIT Checkout -B My-NOVA-Feature).
• Сделайте коммиты с хорошими описаниями (GIT Commit -m 'добавляет новую функцию »).
• Сделайте толчок к созданному ветви (GIT Push Origin My-New-Feature).
• Откройте запрос на просмотр.

Лицензия

Этот проект лицензирован по лицензии MIT - см. Файл License.md для получения более подробной информации.

Контакт

Если у вас есть какие -либо вопросы или проблемы, свяжитесь с нами:

Электронная почта: [email protected]

Lordes Sith ответственен за проект

• Дарт Дэвид ⚔?

Наставник, который предложил задачу:

Профиль Артемизия Вейл

Наставник Github: https://github.com/arteweyl

Благодаря победе мои цепи сломаны.
Сила меня освободит.