Data Engineer

Нахожусь в поиске Data Engineer в компанию, которая является одним из крупнейших ритейлеров России.

Команда, в которую ведется поиск, развивает корпоративное хранилище данных.

Проект предполагает как поддержку текущих решений, так и переход на новый стек технологий.

⚙️На какие задачи ищем:

• Участие в миграции Хранилища данных на новые технологии, используя фреймворк компании;

• Создание новых и развитие старых интеграций по загрузке сырых данных в DataLake;

• Разработка pipline'ов доставки и обработки данных формирования витрин данных;

• Написание и оптимизация сложных скриптов обработки данных.

• Подготовка регламентов, инструкций и технической документации.
  
  🔧Стек технологий: S3, Impala, Airflow, Spark, DBT, Python.

️ На что обращаем внимание:

• Наличие опыта 3+ лет в Data Engineering;

• Опыт написания SQL-кода от 2 лет;

• Опыт создания ETL-процессов;

• Понимание подходов моделирования данных: приоритет — Data Vault и 3НФ, желательно знание Anchor Modeling;

• Знание Python на уровне написания скриптов будет большим плюсом.

С радостью предложим:

• Трудоустройство по ТК РФ и полностью белую зарплату;

• Возможность работы полностью удаленно или из офиса;

• Гибкий график;

• ДМС, корпоративную библиотеку и обучение;

• Бонусы.