Data Engineer
По договоренности
- Марксистская
- Третьяковская
- Новокузнецкая
Основные обязанности:
- анализ и оценка требований к потокам загрузки;
- обследование источников, системный анализ структур данных источников;
- разработка интеграционных решений для подключения к новым источникам;
- проектирование модели данных DWH (stage-области, детального слоя, витрин данных);
- разработка процедур загрузки данных (ETL-процессов) в DWH;
- разработка процедур формирования аналитический витрин;
- профилирование и очистка данных, разработка процедур контроля качества данных;
- документирование разработанных артефактов в Глоссарии и Каталоге данных, описание потоков данных в вики;
- проведение ревью кода и участие в программе менторинга младших инженеров данных команды.
Наши пожелания к знаниям и опыту:
- отличные знания SQL, опыт работы с СУБД (Oracle, Arendatadb, Postgree, Geenplum, Clickhouse);
- опыт разработки ETL-процессов на Apache Airflow;
- навыки оптимизации SQL-запросов;
- практические навыки работы с данными в файловом хранилище S3;
- базовые навыки DevOps (в объеме самообслуживания) – GitLab;
- умение писать чистый поддерживаемый код и техническую документацию.
Мы предлагаем:
- Работа в коллективе ИТ-профессионалов
- Возможность самореализации в амбициозных проектах цифровой трансформации компании-лидера в своей отрасли
- Отсутствие бюрократии и дух стартапа
- Стабильный работодатель
- Достойный уровень оплаты, годовой бонус
- Конкурентоспособный социальный пакет
- Официальное трудоустройство в собственную аккредитованную ИТ компанию со всеми преимуществами
- Гибридный график работы.
Адрес: Россия, Москва, Валовая улица, 26
Опубликована день назад
Похожие вакансии
Вакансии быстро закрываются — подпишитесь на наш канал в MAX сейчас, чтобы видеть их первыми.
Подписаться в MAX АНО «Цифровой аудит» специализируется на внедрении инноваций в области Big Data и AI для создания надежных ... инструментами: Kafka, Airflow, Pentaho, S3 или совместимые хранилища. - Опыт работы инженером данных / data ... engineer / ETL-разработчиком от 3 лет. - Уверенное владение SQL. - Понимание ETL/ELT-концепций, построения ...
- Полный день
- Опыт от 3 лет
- Москва
2 дня назад
193 000 - 309 700 ₽
Выше средней на 14%
... обработки и хранения данных разбор инцидентов качества данных, развитие автоматизированных тестов (Data ... Java/Scala и опыт разработки на нём опыт разработки на Python понимание инструментов и технологий Big Data ...
- Полный день
- Опыт от 3 лет
- Москва
3 часа назад
120 000 - 200 000 ₽
Нам нужен Data Engineer, который поможет выстроить эффективные процессы работы с данными и обеспечить ... процесса, участвовать в тестировании и приёмке готового функционала; Требования: Опыт от 2 лет в роли Data ... Engineer; SQL на продвинутом уровне — уверенное написание сложных запросов (оконные функции, вложенные ...
- Полный день
- Опыт от 3 лет
- Москва
день назад
Java-подобного языка - Опыт работы с MPP системами (GreenPlum / Hadoop / StarRocks) - Опыт работы с DBT (Data ...
- Полный день
- Опыт от 3 лет
- Москва
день назад
Требования умение проектировать DWH, Data Lake, Data Management Platform опыт построения и развития высоконагруженных ...
- Полный день
- Опыт от 3 лет
- Москва
день назад
Вакансия в подборках
Похожие вакансии
193 000 - 309 700 ₽
120 000 - 200 000 ₽