Data Engineer / Инженер данных
По договоренности
Обязанности:
- реализация в тандеме с архитектором физического уровня архитектуры данных в DWH для всех слоев (raw data layer, core data layer, data mart layer);
- реализация ETL-пайплайнов передачи данных из различных внутренних и внешних ИТ-систем, используя разные подходы получения данных из источника;
- построение эффективной системы оркестрации ETL-пайплайнов обеспечивающей обновление данных в DWH согласно обозначенным бизнес требованиям;
- реализация и поддержка прикладных решений для контроля качества данных в DWH;
- реализация и поддержка прикладных решений для управления метаданными DWH;
- участие в R&D для выбора инструментов для построение отдельных частей платформы данных.
-
Опыт работы от 3х лет;
-
базовые навыки в области инженерии данных;
-
системное аналитическое инженерное мышление;
-
умеренный перфекционизм и внимание к деталям;
-
понимание концепций проектирования DWH;
-
продвинутый уровень знания SQL;
-
высокий уровень владения Python для обработки данных;
-
опыт работы с оркестраторами и понимание концепции DAG;
-
опыт разработки и поддержки end-to-end пайплайнов данных;
-
опыт получения данных из различных типов API;
-
опыт работы с потоковой обработкой данных;
-
умение работать с GIT.
- график работы: на испытательном сроке офис 5/2, далее гибрид;
- ежегодная индексация зарплаты, компенсация питания, премии по результатам работы, доплаты за больничный, материальная помощь в сложных ситуациях;
- релокация из любой точки мира.
Адрес: Россия, Москва, Причальный проезд, 2
Опубликована 3 часа назад
Похожие вакансии
Вакансии быстро закрываются - скачайте мобильное приложение в RuStore и откликайтесь первыми!
Скачать бесплатноCтек технологий Big Data (Hadoop, Spark, Hive/Impala) и любой СУБД.
- Полный день
- Опыт от 3 лет
- Москва
день назад
Мы развиваем направление аналитики и работы с данными транзакционного бизнеса. Ищем в команду инженера по данным, который будет помогать строить дата-продукты с основным фокусом на разработку в Hadoop-экосистеме. Обязанности анализировать требования ...
- Полный день
- Опыт от 3 лет
- Москва
день назад
... опыт работы с Kafka; Желание развиваться как в области системного и бизнес-анализа, дата-инженерии и data ...
- Полный день
- Опыт от 3 лет
- Москва
8 дней назад
Работа с качеством данных (Data Quality): * Опыт решения задач дедупликации (слияния дублей записей о ...
- Полный день
- Опыт от 3 лет
- Москва
8 дней назад
Требования опыт в data engineering от 3х лет практический опыт разработки на PySpark или Spark опыт разработки ...
- Полный день
- Опыт от 3 лет
- Москва
8 дней назад