Data инженер (со знанием Scala)
По договоренности
Наша команда создает ключевой продукт для аналитики Сбера — Прикладную аналитическую платформу B2C. Мы помогаем сотням команд внутри экосистемы быстро создавать надежные аналитические витрины на Облаке Данных, чтобы глубже понимать клиентские пути и формировать персонализированные предложения.
Мы ищем сильного Data Engineer, который будет напрямую влиять на архитектуру и развитие этого стратегического инструмента. Вы будете создавать решения, которыми ежедневно пользуются десятки аналитиков и дата-инженеров.
Обязанности
- участвовать в проектировании и развитии архитектуры фреймворка для построения batch- и streaming-витрин.
- разрабатывать ядро платформы и ее компоненты (оркестрация, метаданные, Data Quality-фреймворк) на Scala/Java.
- создавать и оптимизировать абстракции и API (включая RESTful), которые упростят работу с данными для других команд.
- проводить производительность и масштабируемость платформы на больших объемах данных (петабайты).
- тесно взаимодействовать с пользователями платформы (аналитиками, дата-инженерами из бизнес-команд) для сбора требований и обратной связи.
- менторить младших разработчиков.
Требования
- глубокое знание Scala или Java, SQL, Bash.
- опыт с Apache Spark (обязательно). Опыт с Flink, Kafka, Iceberg или аналогичными
- понимание DWH/Data Lake, ETL/ELT-процессов, SCD, Data Quality
- опыт проектирования отказоустойчивых и масштабируемых систем, понимание SOLID, опыт написания тестов (unit, integration)
- опыт кросс-функционального взаимодействия, принятия архитектурных решений, наставничества
будет преимуществом (желательные навыки):
- опыт с Hadoop-экосистемой (HDFS, YARN, Hive)
- знание Trino/Velox
- опыт работы с микросервисной архитектурой и REST API
- опыт с ClickHouse, Kubernetes, S3
- знание Python.
Условия
- работа в офисе по адресу г. Москва, Кутузовский проспект 32к1
- годовой бонус и ежегодный пересмотр
- расширенный ДМС с первого дня + стоматология и льготное страхование для семьи
- корпоративный университет Сбера, внутренняя образовательная платформа, участие в IT-конференциях
- офис на Кутузовском проспекте 32 с видом на набережную, зонами отдыха и спортзалом
- льготная ипотека в Сбере, корпоративная пенсионная программа, подписка СберПрайм+, скидки от партнеров и сервисов группы компаний.
Опубликована 21 день назад
Похожие вакансии
от 170 000 ₽
Требования: Опыт работы от 10 лет в сфере эксплуатации Систем электроснабжения, Высоковольтного оборудования, ЦТП, систем теплоснабжения и ГПМ. Знание законодательства и нормативной базы в области эксплуатации Недвижимости, электроснабжения, теплосна...
- Полный день
- Опыт от 5 лет
- Москва
день назад
150 000 - 180 000 ₽
Обязанности: - Организация работ по эксплуатации и тех- обслуживанию систем вентиляции и кондиционирования, отопления, водоснабжения и водоотведения. - Контроль за техническим состоянием объекта : инженерные сети (ГВС, ХВС, ЦО и др.), строительные ко...
- Полный день
- Опыт от 5 лет
- Москва
день назад
200 000 ₽
Рыночная зарплата
Обязанности: Организация эксплуатации торгово-развлекательного комплекса «МАРИ» общей площадью 135 000 м2, контроль работы подразделений, осуществляющих техническое обслуживание здания; Обеспечение и надзор за эксплуатацией технологического оборудова...
- Полный день
- Опыт от 5 лет
- Москва
2 дня назад
от 190 000 ₽
Рыночная зарплата
Мы ищем не просто главного инженера, а технического лидера и стратега, который сможет взять на себя полную ... машиностроение); Опыт: От 5-7 лет в строительстве, из которых минимум 5 лет на руководящих позициях (Главный инженер ... , Зам. главного инженера, Технический директор) в строительно-монтажных организациях; Отраслевой опыт ...
- Полный день
- Опыт от 5 лет
- Москва
2 дня назад
180 000 - 200 000 ₽
Рыночная зарплата
Требуется: Инженер-сметчик Работа по всем разделам Обязанности: Разработка и составление сметной документации ... Требования: знание программы smeta.ru Высшее образование Опыт работы инженером-сметчиком более 10 лет ...
- Полный день
- Опыт от 5 лет
- Москва
2 дня назад
Вам предстоит: Проектирование контейнерной инфраструктуры с нуля: Разработка архитектуры Kubernetes-кластеров (включая выбор CNI-плагинов, сетевых политик, систем мониторинга). Создание шаблонов и стандартов для деплоя приложений (Helm). Интеграция и...
- Полный день
- Опыт от 5 лет
- Москва
3 дня назад
Вакансия в подборках
Похожие вакансии
от 170 000 ₽
150 000 - 180 000 ₽
200 000 ₽
от 190 000 ₽