Data Engineer (офис, Новосибирск)

Мы - команда разработки Аналитической Платформы (АПЛ) розничного взыскания, занимаемся разработкой дата-продуктов на основе большого объема данных и ищем высоквалифицированного разработчика / дата инженера хранилища данных, способного принять активное участие в развитии нашей аналитической платформы (тех стек Greenplum / PostgreSQL / Hadoop).

АПЛ - это платформа с 3000+ активных пользователей, предоставляющая возможность разработки аналитических продуктов на основе современной микросервисной архитектуры с использованием стека Greenplum, PostgreSQL, Openshift, Hadoop экосистемы (Spark и т.д. ), Apache Airflow, Python, Java, Java script.

Задачи:

• поиск и анализ источников данных
• аналитика и проектирование витрин данных под потребности бизнес-заказчиков
• разработка витрин данных на основе Greenplum (PL/pgSQL) и Hadoop (Java spark) и вывод их в пром в соответствии с банковским релизным процессом
• подготовка и сборка дистрибутивов, сопровождение по стендам разработки и тестирования
• разработка решений потоковой обработки данных в режиме Near Real Time (NRT) и пакетной(Batch)
• выстраивание и оптимизация производительности ETL-процессов
• оптимизация существующих разработок
• разработка и поддержка сопроводительной документации и спецификаций данных, базы знаний по вопросам работы с данными.

Мы ждем от кандидата:

• опыт работы дата-инженером от 2-х лет с MPP и реляционными СУБД: Greenplum, PostgreSQL, способность выбирать архитектурные паттерны, связанные с этими особенностями будет являться преимуществом
• уверенное знание SQL: агрегатные, аналитические функции, опыт написания и оптимизации сложных запросов, программных единиц на PL/pgSQL
• опыт разработки и внедрения корпоративных хранилищ данных (DWH)
• опыт работы с CI/CD решениями на базе Jenkins и Bitbucket/Git
• навыки работы с генеративными AI-моделями; опыт создания AI-агентов и использования их в работе будет преимуществом.

Мы предлагаем:

• комфортный офис по адресу г. Новосибирск
• ежегодный пересмотр зарплаты, годовая премия
• корпоративный спортзал и зоны отдыха
• более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
• программа адаптации и помощь руководителя на старте
• расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
• гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
• подписка Прайм с возможностью совместного использования на трёх близких
• вознаграждение за рекомендацию друзей в команду Сбера.