Разработчик DWH/ETL (офис)

Приглашаем Разработчика DWH в команду разработки банка.

Обязанности:

• Разработка и поддержка ETL/ELT процессов на Python;
• Интеграция данных из различных источников (RDBMS, API, файловые системы, очереди сообщений);
• Построение и оптимизация пайплайнов загрузки и трансформации данных;
• Разработка DAG'ов в Dagster для оркестрации процессов;
• Проектирование моделей данных (витрины, слой бизнес-логики);
• Обеспечение мониторинга, логирования и отказоустойчивости пайплайнов;
• Оптимизация производительности обработки данных (partitioning, indexing, parallelism);
• Взаимодействие с аналитиками, Data Scientists и BI-командами

• Проектирование и разработка хранилищ данных (DWH, Data Lake, Data Mart);
• Разработка ETL/ELT-пайплайнов на Python (batch и streaming);
• Оптимизация обработки больших данных и SQL-запросов;
• Построение потоков данных и интеграций (Kafka, REST, CDC);
• Работа с оркестрацией (Dagster,Airflow);
• Data modeling (Star Schema, Data Vault, 3NF);
• Обеспечение качества данных (Data Quality, Data Lineage).
  Технологический стек:
  Python, SQL, Dagster, Apache Airflow, Kafka, PostgreSQL, ClickHouse, dbt, Docker, Kubernetes, Git, REST AP

• Официальное оформление в стабильную аккредитованную Минцифра ИТ-компанию EGAR;
• Формат работы - офис;
• График работы с 9:00 до 18:00;
• Конкурентный уровень заработной платы, который мы готовы обсудить на собеседовании;
• Полноценную проектную команду с четким разделением ролей;
• Оперативное решение организационных вопросов;
• Возможность профессионального роста (вертикального или горизонтального);
• Возможности обучения (курсы, сертификация);
• Бонусы по реферальной программе, за успешную рекомендацию;
• Дополнительно 4 дня в год по болезни без больничного листа (sick day);
• Расширенный пакет ДМС, включая стоматологию;
• Применение в работе современных технологий и стандартов.