Data Engineer
По договоренности
Чем предстоит заниматься
- Реализация ETL/ELT-пайплайнов на dev/test-стендах с использованием Airflow, Spark, SQL
- Создание и оптимизация скриптов для сбора данных, формирования витрин.
- Проведение нагрузочного тестирования, валидация качества данных.
- Подготовка решений к переносу на prod-среды (совместно с DevOps).
- Внедрение контролей качества данных на этапе всех этапах движения данных между системами.
- Ведение технической документации по ETL-процессам и объектам DWH.
- Участие в Data Governance (техническая реализация стандартов).
- Оптимизация производительности текущих решений.
- Участвовать в обсуждении и принятии решений в архитектурных решениях работы с данными и построении конечных витрин данных для пользователей
- Решение инцидентов, связанных с данными на prod-средах с точки зрения тестирования и поиска багов
- Экспертные знания SQL (диалект Oracle) для разработки/оптимизации ETL-скриптов, создания витрин.
- Опыт работы с Airflow, Spark; знание Informatica PowerCenter, Greenplum — как ключевое преимущество.
- Знание языка Python на хорошем уровне. (работа с библиотеками Spark/PySpark/pandas/numpy)
- Глубокое понимание архитектуры Big Data-платформ (включая DWH, Data Lakes), принципов работы ETL/ELT.
- Опыт оптимизации запросов и пайплайнов (на уровне кода и инфраструктуры).
- Уверенное владение Git, CI/CD-инструментами
- Умение быстро погрузиться в новый стек технологий при необходимости
- Работа с Jira, Confluence для трекинга задач и документации.
- Знание подходов к тестированию данных (unit-тесты, валидация качества).
- Умение интерпретировать технические требования от бизнес-аналитиков.
- Понимание банковской специфики данных (регламенты, безопасность, структура продуктов).
- Базовые навыки делового общения для синхронизации с командами.
- Системное мышление, умение декомпозировать задачи.
- Опыт работы в банковской сфере
- Английский язык (чтение технической документации)
Что мы предлагаем взамен
- Стабильный и прозрачный доход: размер заработной платы обсуждается по итогам собеседования + квартальная премия по результатам KPI
- Полную удалёнку или гибрид на выбор, а также уютный ИТ-хаб в Москве, Санкт-Петербурге, Екатеринбурге и сезонный коворкинг в Сочи
- Сложные и интересные задачи, современный стек технологий
- Заботу о вашем здоровье: программа ДМС с первых дней работы, куда входит стоматология, обслуживание в лучших клиниках города, страхование и полная компенсация 10-ти дней больничного
- Возможность вертикального и горизонтального карьерного роста: регулярно проходят тренинги, вебинары, митапы и демо-дни
- Доступ к бесплатным корпоративным библиотекам Alpina Digital, MyBook и бизнес-изданий
- Предложения от Банка только для сотрудников: собственные спортзалы (Москва, Санкт-Петербург, Екатеринбург), а также скидки на услуги туристических агентств, продукты питания, в рестораны, бары, магазины
Опубликована 5 часов назад
Похожие вакансии
Вакансии быстро закрываются — подпишитесь на наш канал в MAX сейчас, чтобы видеть их первыми.
Подписаться в MAX Flink DataStream Реализация архитектуры потоков данных Написание и доработка Java приложений для Big Data ... исключения и generics Spring Boot: Опыт разработки микросервисов и REST API с Spring Boot, включая Spring Data ...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
6 часов назад
... существующие процессы формировать BPMN нотации ЧТО НУЖНО ДЛЯ ЭТОЙ РАБОТЫ: опыт работы от 3 лет в роли Data ... Engineer уверенное знание SQL и Python опыт работы с ETL/ELT-инструментами и фреймворками: Apache Airflow ... Quality и Data Governance в коде. знать Git Будет преимуществом: знакомство с инструментами каталога ...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
день назад
Чем предстоит заниматься: Проектирование и развитие data-пайплайнов для обработки событий кибербезопасности ... Что мы ждем от кандидата: Опыт построения и эксплуатации data pipelines (ETL, ELT и/или streaming) в ... ; Практики data quality (валидации, контроль пропусков и объёмов данных.
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
4 дня назад
... масштабируемых и отказоустойчивых решений (репликация, шардирование в ClickHouse); построение и поддержка Data ...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
6 часов назад
Ищем Data Engineer в направление рекомендаций, который будет совместно с нами строить пайплайны и развивать ... делает работу Data Engineer особенно важной. ... В команде рекомендаций сейчас два Data Engineer, и мы ищем коллег, чтобы поддерживать текущий ритм разработки ...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
день назад