Senior Data Engineer

Sber Process Mining – система интеллектуального анализа бизнес-процессов от Сбера. Система позволяет на основе данных из информационных систем компаний делать автоматизированную аналитику с применением AI и BI инструментов. Process Mining позволяет обнаружить «узкие места» в бизнес-процессах, выявлять недобросовестные практики и потенциал к повышению эффективности процессов, росту прибыли компании и удовлетворенности клиентов.

Стек: python, clickhouse, postgres, spark, apache superset, apache airflow.

Задачи:

• участие в разработке ядра системы анализа процессов
• разработка переиспользуемых трансформаций данных и пайплайнов
• разработка self-service инструментов обработки данных для пользователей
• разработка и проектирование модели данных.

Мы ожидаем:

• опыт работы в качестве инженера данных от 4 лет
• опыт работы с Airflow, NiFi или др. оркестраторами ETL процессов
• владение SQL на уровне native speaker
• уверенное знание Python
• опыт работы с Big Data стеком, ClickHouse, Spark, Hive
• знание основ ООП, теории алгоритмов, структур данных
• знание теории построения хранилищ данных
• любознательность, широкий кругозор, желание изучать новые технологии, исследовательский склад ума

Будет плюсом:

• опыт в Unix shell: базовые команды для работы с файлами и процессами
• опыт работы с брокерами сообщений
• опыт работы с Docker, Kubernetes.

Мы предлагаем:

• формат работы офис,гибрид
• стабильный оклад+ годовое премирование и социальная поддержка сотрудников
• расширенный ДМС с первого дня работы для сотрудников и льготная медицинская страховка для близких
• бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
• корпоративная пенсионная программа
• корпоративное обучение за счет компании, в т.ч. посещать конференции по профессиональной тематике, а так же огромный каталог образовательных программ
• реферальная программа для сотрудников: можно пригласить в команду знакомых профессионалов и получить вознаграждение до 100 тыс. рублей
• корпоративный спортзал и скидки в спортзалы-партнеры
• работу по Agile с лучшими из IT индустрии: 2000 продуктовых команд и возможность внутреннего перемещения
• яркая и насыщенная корпоративная жизнь: «Зелёный марафон», Сбербанкиада, КВН, волонтёрские программы и т.д.