Нахожусь в поиске Data Engineer в компанию, которая является одним из крупнейших ритейлеров России.

Команда, в которую ведется поиск, развивает корпоративное хранилище данных.

Проект предполагает как поддержку текущих решений, так и переход на новый стек технологий.

⚙️На какие задачи ищем:

Участие в миграции Хранилища данных на новые технологии, используя фреймворк компании;
Создание новых и развитие старых интеграций по загрузке сырых данных в DataLake;
Разработка pipline'ов доставки и обработки данных формирования витрин данных;
Написание и оптимизация сложных скриптов обработки данных.
Подготовка регламентов, инструкций и технической документации.
🔧Стек технологий: S3, Impala, Airflow, Spark, DBT, Python.

️ На что обращаем внимание:

Наличие опыта 3+ лет в Data Engineering;
Опыт написания SQL-кода от 2 лет;
Опыт создания ETL-процессов;
Понимание подходов моделирования данных: приоритет — Data Vault и 3НФ, желательно знание Anchor Modeling;
Знание Python на уровне написания скриптов будет большим плюсом.

С радостью предложим: