Data Engineer

По договоренности

Спортмастер

Москва

⚡ Откликнуться на hh.ru

Мы находимся в поиске Data Engineera в департамент систем клиент-сервер.

Обязанности:

Реализация ETL в Hadoop (с помощью Airflow);
Работа с различными источниками данных: Oracle MS SQL API личных кабинетов, микросервисы;
Батч и стримы с помощью PySpark и Kafka;
Подготовка витрин для анализа (Hive + Spark+ SQL).

Требования:

Уверенное владение Python;
Опыт использования эко-системы Hadoop: HDFS, Apache AirFlow, Hive, Kafka,Spark;
Знание SQL;
Опыт работы с реляционными базами данных (Oracle).

Наш стек: Kafka, Spark, Airflow, Jira, Confluence, GitLab.

⚡ Откликнуться на hh.ru

Опубликована 8 дней назад

Data Engineer / Инженер данных

Мы строим Data Lake House платформу с современным стеком: S3, Trino, Apache Iceberg, DBT, Airflow, Kafka ... реализация в тандеме с архитектором физического уровня архитектуры данных в DWH для всех слоев (raw data ... layer, core data layer, data mart layer); реализация ETL-пайплайнов передачи данных из различных внутренних ...

Полный день
Опыт от 3 лет

WINLINE

Москва

2 дня назад

⚡ Откликнуться на hh.ru

Data engineer (с разговорным английским)

Информация о продукте: Мы ищем человека, способного вместе с нами создавать и развивать продукт «Early Warning System». Наши основные задачи: создание автоматизированного процесса своевременного выявления негативных тенденций в деятельности контраген...

Полный день
Опыт от 3 лет

СБЕР

Москва

2 дня назад

⚡ Откликнуться на hh.ru

Data Engineer

Требования к кандидату: Опыт работы Data Engineer от 3 лет; Опыт проектирования пайплайнов по моделям ...

Полный день
Опыт от 3 лет

Грузовичкоф

Москва

4 дня назад

⚡ Откликнуться на hh.ru

Senior Data Engineer

Мы разрабатываем платформу для планирования и управления цепочками поставок, ядром которой становится собственная система IBP (Integrated Business Planning). Команда строит end-to-end дата-пайплайны, интегрирует внешние и внутренние источники данных ...