Data engineer
По договоренности
Разработки и поддержки витрин данных в Hadoop (HDFS, Iceberg, Hive), ETL - Spark, CTL - Oozie, CI/CD - Jenkins + BitBucket
Обязанности
• разработка DWH/DataLake/LakeHouse
• построение поставки данных в Batch
• оптимизация sparkовых джоб
• разработка и валидация архитектуры данных
Требования
• отличное знание SQL (join, CTE, оконные функции, фреймы и др.)
• опыт работы с Hadoop, Spark, Iceberg
• опыт работы с оркестраторами (например, Airflow) и CI/CD
• практическое знание Python (можно Scala) на уровне разработки ETL
• практический опыт разработки промышленных ETL потоков
Условия
- офисный формат работы (Кутузовская)
- годовой бонус и ежегодный пересмотр зарплаты
- расширенный ДМС с первого дня и льготное страхование для семьи
- корпоративный университет Сбера, внутренняя образовательная платформа, участие в IT-конференциях
- льготная ипотека в Сбере, корпоративная пенсионная программа, подписка СберПрайм, скидки от партнеров и сервисов группы компаний
Опубликована 13 часов назад
Похожие вакансии
Вакансии быстро закрываются - скачайте мобильное приложение в RuStore и откликайтесь первыми!
Скачать бесплатно... автоматизированные проверки качества данных (SQL, PySpark, SparkSQL) Проектировать и поддерживать правила Data ... Quality для новых источников данных Разрабатывать и сопровождать Data Contracts Анализировать схемы ... Lake, Data Lakehouse (слои bronze/silver/gold) Опыт тестирования данных (ETL testing, DWH testing, Data ...
- Полный день
- Опыт от 1 года
Криптонит- Москва
6 дней назад
... бизнес-аналитики Сбор и объединение данных из различных внутренних и внешних источников Участие в процессах Data ... Quality, Data Lineage, Data Governance Мы ожидаем: Опыт на аналогичной позиции от 1 года Опыт работы ...
- Полный день
- Опыт от 1 года
СБЕРАВТО- Москва
13 дней назад
до 480 000 ₽
Выше средней на 380%
... обработка и контроль качетсва разрозненных данных из сотен систем-истоников банка в единое хранилище в Data ... опыт работы с оркестраторами (например, Airflow) и CI/CD опыт построения архитектуры данных (например, Data ... создания и защиты архитектуры данных будет преимуществом практический опыт разработки solution-архитектуры data-продуктов ...
- Полный день
- Опыт от 1 года
СБЕР- Москва
13 дней назад
... реализация в тандеме с архитектором физического уровня архитектуры данных в DWH для всех слоев (raw data ... layer, core data layer, data mart layer); - реализация ETL-пайплайнов передачи данных из различных внутренних ...
- Полный день
- Опыт от 1 года
Интерфакс- Москва
13 дней назад
Сейчас мы ищем Инженера данных (Data Engineer), который будет заниматься развитием и поддержкой инфраструктуры ... задач, связанных с данными Будем рады видеть в новом коллеге следующее: Опыт работы инженером данных (Data ... Engineer) от 2 лет Уверенное владение Python и SQL, опыт их практического применения для обработки и ...
- Полный день
- Опыт от 1 года
Платформа Третье Мнение- Москва
12 дней назад
Вакансия в подборках
Похожие вакансии
КриптонитСБЕРАВТОдо 480 000 ₽
СБЕРИнтерфакс