Data Engineer (Прайсинг)

Прайсинг - новая платформа ценообразования в рамках RWB. Создание системы управления ценой товаров на базе дата- и продвинутой аналитики (ML), с целью управления PnL компании и лояльностью пользователя.

Вам предстоит:

• Проводить интеграцию потоков данных в единый контур хранения (Data Lake);
• строить аналитических витрин;
• заниматься построением витрин признаков (генерация фичей) под задачи аналитики;
• контролировать качество и аномалии во входных потоках.

Вы нам подходите, если:

• Имеете опыт работы с Data lake-ами (на базе S3 и/или HDFS);
• владеете опытом работы с аналитическими СУБД (GreenPlum, Clickhluse, Vertica);
• работали с движками распределенных вычислений (Spark, Trino);
• имеете опыт работы с оркестраторами данных (Airflow, Dagster и другие);
• имеете опыт построение ETL и ELT процессов;
• владеете опытом разработки на Python (java/scala будет плюсом).