Data Engineer

По договоренности


Чем предстоит заниматься
  • Реализация ETL/ELT-пайплайнов на dev/test-стендах с использованием Airflow, Spark, SQL
  • Создание и оптимизация скриптов для сбора данных, формирования витрин.
  • Проведение нагрузочного тестирования, валидация качества данных.
  • Подготовка решений к переносу на prod-среды (совместно с DevOps).
  • Внедрение контролей качества данных на этапе всех этапах движения данных между системами.
  • Ведение технической документации по ETL-процессам и объектам DWH.
  • Участие в Data Governance (техническая реализация стандартов).
  • Оптимизация производительности текущих решений.
  • Участвовать в обсуждении и принятии решений в архитектурных решениях работы с данными и построении конечных витрин данных для пользователей
  • Решение инцидентов, связанных с данными на prod-средах с точки зрения тестирования и поиска багов
Что мы ждем от вас
  • Экспертные знания SQL (диалект Oracle) для разработки/оптимизации ETL-скриптов, создания витрин.
  • Опыт работы с Airflow, Spark; знание Informatica PowerCenter, Greenplum — как ключевое преимущество.
  • Знание языка Python на хорошем уровне. (работа с библиотеками Spark/PySpark/pandas/numpy)
  • Глубокое понимание архитектуры Big Data-платформ (включая DWH, Data Lakes), принципов работы ETL/ELT.
  • Опыт оптимизации запросов и пайплайнов (на уровне кода и инфраструктуры).
  • Уверенное владение Git, CI/CD-инструментами
  • Умение быстро погрузиться в новый стек технологий при необходимости
  • Работа с Jira, Confluence для трекинга задач и документации.
  • Знание подходов к тестированию данных (unit-тесты, валидация качества).
  • Умение интерпретировать технические требования от бизнес-аналитиков.
  • Понимание банковской специфики данных (регламенты, безопасность, структура продуктов).
  • Базовые навыки делового общения для синхронизации с командами.
  • Системное мышление, умение декомпозировать задачи.
  • Опыт работы в банковской сфере
  • Английский язык (чтение технической документации)

Что мы предлагаем взамен

  • Стабильный и прозрачный доход: размер заработной платы обсуждается по итогам собеседования + квартальная премия по результатам KPI
  • Полную удалёнку или гибрид на выбор, а также уютный ИТ-хаб в Москве, Санкт-Петербурге, Екатеринбурге и сезонный коворкинг в Сочи
  • Сложные и интересные задачи, современный стек технологий
  • Заботу о вашем здоровье: программа ДМС с первых дней работы, куда входит стоматология, обслуживание в лучших клиниках города, страхование и полная компенсация 10-ти дней больничного
  • Возможность вертикального и горизонтального карьерного роста: регулярно проходят тренинги, вебинары, митапы и демо-дни
  • Доступ к бесплатным корпоративным библиотекам Alpina Digital, MyBook и бизнес-изданий
  • Предложения от Банка только для сотрудников: собственные спортзалы (Москва, Санкт-Петербург, Екатеринбург), а также скидки на услуги туристических агентств, продукты питания, в рестораны, бары, магазины

Поделиться:

Опубликована 5 часов назад

Похожие вакансии

Flink DataStream Реализация архитектуры потоков данных Написание и доработка Java приложений для Big Data ... исключения и generics Spring Boot: Опыт разработки микросервисов и REST API с Spring Boot, включая Spring Data ...
  • Можно удаленно
  • Полный день
  • Опыт от 3 лет
Логотип компании X5 TechX5 Tech
  • Москва
6 часов назад
... существующие процессы формировать BPMN нотации ЧТО НУЖНО ДЛЯ ЭТОЙ РАБОТЫ: опыт работы от 3 лет в роли Data ... Engineer уверенное знание SQL и Python опыт работы с ETL/ELT-инструментами и фреймворками: Apache Airflow ... Quality и Data Governance в коде. знать Git Будет преимуществом: знакомство с инструментами каталога ...
  • Можно удаленно
  • Полный день
  • Опыт от 3 лет
Логотип компании МТСМТС
  • Москва
день назад
Чем предстоит заниматься: Проектирование и развитие data-пайплайнов для обработки событий кибербезопасности ... Что мы ждем от кандидата: Опыт построения и эксплуатации data pipelines (ETL, ELT и/или streaming) в ... ; Практики data quality (валидации, контроль пропусков и объёмов данных.
  • Можно удаленно
  • Полный день
  • Опыт от 3 лет
Логотип компании Cloud.ruCloud.ru
  • Москва
4 дня назад
... масштабируемых и отказоустойчивых решений (репликация, шардирование в ClickHouse); построение и поддержка Data ...
  • Можно удаленно
  • Полный день
  • Опыт от 3 лет
Логотип компании РаппортоРаппорто
  • Москва
6 часов назад
Ищем Data Engineer в направление рекомендаций, который будет совместно с нами строить пайплайны и развивать ... делает работу Data Engineer особенно важной. ... В команде рекомендаций сейчас два Data Engineer, и мы ищем коллег, чтобы поддерживать текущий ритм разработки ...
  • Можно удаленно
  • Полный день
  • Опыт от 3 лет
Логотип компании OkkoOkko
  • Москва
день назад
Мы обрабатываем данные посетителей и используем куки в соответствии с политикой конфиденциальности.