Data Engineer

Наша команда занимается поддержанием функций цифрового ассистента, который предоставляет возможность отвечать на вопросы и решать задачи пользователя посредством большой языковой модели GigaChat. Работая с нами, вы станете частью команды, которая создаёт инновационные продукты и сервисы, открывающие новые горизонты для миллионов клиентов и помогающие им решать ежедневные задачи максимально эффективно. Наши продукты и сервисы дают новые возможности для миллионов клиентов наших приложений(Сбербанк Онлайн, Инвестор, СберКидс и др.)

Первый этап отбора на эту вакансию — общение с AI- рекрутером. После отклика вам на почту придёт приглашение пройти первичное интервью с ГиаРекрутером. Диалог займёт примерно 10 минут. Его задача — уточнить недостающие детали и ускорить рассмотрение вашей кандидатуры. ГиаРекрутер только начинает свой путь, поэтому просим относиться с пониманием. Ваш опыт и участие помогут сделать его удобным и полезным!

Обязанности

• анализ, загрузка, очистка и трансформация больших объемов данных из различных автоматизированных систем банка (анализ структуры, качества, полноты и применимости данных) в рабочую область на платформе MPP СУБД Greenplum/Hadoop
• проектирование и разработка аналитических витрин данных
• контроль качества загружаемых данных (реализация сложных проверок качества, проведение корректировок данных большого объема)
• реализация ETL-процессов, участие в подготовке внедрения релизов в промышленную среду
• разработка и поддержка ETL-процессов загрузки данных в/из хранилища с использованием Python/Airflow
• поиск и предоставление данных по запросу внутренних и внешних заказчиков
• расчет сложных аналитических показателей в витринах данных
• документирование в confluence.

Требования

• уверенное владение SQL (аналитические функции, подзапросы, хранимые процедуры/функции, оптимизация производительности)
• опыт работы с базами данных Clickhouse, Greenplum. Нормализация, денормалиация, написание процедур, материализация данных из сторонних источников
• опыт использования экосистемы Hadoop: HDFS, Spark, Hive
• умение оптимизировать программный код в соответствии с особенностями архитектур хранения данных
• продвинутые аналитические навыки и вариативное видение решения задач
• ориентация на достижение результата, внимательность к деталям, коммуникабельность, готовность общаться с бизнес заказчиком.

Условия

• возможность профильного обучения (обучение и сертификация за счет компании в Корпоративном университете)
• профессиональный рост
• офисный формат работы. Офис находится на Кутузовском проспекте 32к.1
• стабильная, конкурентная «белая» заработная плата (оклад + премии)
• льготные условия по кредитам Сбербанка
• ДМС, страхование от несчастных случаев, социальные гарантии, корпоративные мероприятия.