Генератор данных поездок на электросамокатах

Для курса-симулятора "dbt для инженеров данных и аналитиков"

Установка зависимостей

pip install .

Создание новой версии

Релиз GitHub создается автоматически при пуше в ветку main.

⚠️ Не забыть загрузить файлы с данными в S3 ⚠️

Опубликованные датасеты

• version.txt - файл с актуальной версией данных
• events.parquet - события из мобильного приложения кикшеринга
• payments.parquet - оплаты поездок пользователями
• trips.parquet - поездки пользователей на самокатах
• users.parquet - пользователи кикшеринга
• scooters_raw.sql - SQL-дамп с данными из parquet-файлов
• weather.json - погодные данные по дням

Автоматизированная загрузка

• dbt Data Bot - телеграм-бот для загрузки данных в базу через интернет
• scooters_data_uploader - приложение для загрузки данных в локальную базу