ETL разработчик (Senior)

Мы российская быстрорастущая платформа, созданная для взаимодействия разработчиков и ведущих компаний России.

У нас множество компаний-партнёров, которые готовы принять к себе в команду ETL разработчика для работы над современными продуктами.

Одно из наших преимуществ-это оперативный процесс найма. Обычно 1-2 собеседования независимо от компании.

Требования:

• Опыт коммерческой разработки и сопровождения ETL/ELT-процессов 4-5 лет.

• Написание сложных SQL-запросов (оконные функции, CTE) и настройка производительности на больших объемах. Знание PostgreSQL, MySQL или MS SQL.

• Использование систем оркестрации (Airflow, NiFi, Prefect) не менее года.

• Работа с фреймворками трансформации (dbt, SSIS, Talend, Glue или Data Factory).

• Настройка контроля качества данных: проверки на этапе загрузки (целостность, формат, полнота), логирование шагов и ошибок, автоматические перезапуски и оповещения.

• Интеграция с разными источниками: API (REST/SOAP), файлы (CSV, JSON, Parquet, Excel). Понимание CDC и разницы между пакетной и потоковой загрузкой.

• Участие в проектах для финансового или логистического домена (учет, транзакции, трекинг, склады).
  

Желательно:

• Опыт с облаками (AWS/Azure/GCP): хранилища (S3, ADLS), аналитические БД (Redshift, BigQuery, Synapse).

• Знание подходов Data Vault 2.0 или Кимбалла.

• Написание кода на Python для трансформаций (Pandas, psycopg2).

• Запуск распределенных задач на Spark.

• Настройка мониторинга (Grafana, алерты в Telegram/Slack).

• Знание концепций Data Mesh и DataOps.

• Использование Great Expectations или DataHub для контроля и каталогизации данных.

Условия:

• удаленный формат работы
• оформление по ИП
• полная занятость
• работа по московскому часовому поясу