Data Engineer\MLOpsEngineer
По договоренности
- Площадь Ленина
- Чернышевская
- Площадь Восстания
ПРОЕКТ: в банковской сфере.
ЧТО МЫ ОЖИДАЕМ ОТ КАНДИДАТА:
- Опыт работы по специальности от 2-х лет;
- Опыт разработки Python/Spark;
- Понимание основ облачных технологий и технологий виртуализации и контейнеризации;
- Опыт с экосистемой Hadoop (HDFS, Hive, Spark и пр.);
- Опыт работы с ETL (Airflow, и пр.);
- Опыт работы с CI/CD решениями на базе Jenkins и Bitbucket / Git.
БУДЕТ ПЛЮСОМ:
-
Опыт работы с BigData в сфере DE/DS/DA;
-
Опыт работы с системами управления базами данных (Hadoop);
-
Опыт работы с платформами оркестрации контейнеров K8s, OpenShift;
-
Опыт внедрения DS-моделей в промышленный контур;
-
Опыт работы с Kafka;
-
Опыт работы с популярными РСУБД (Greenplum, Teradata, Oracle, PostgreSQL);
-
Понимание принципов построения хранилищ данных DWH.
ЧЕМ ПРЕДСТОИТ ЗАНИМАТЬСЯ:
- Разработка витрин и анализ больших объемов данных с использованием Python и Spark;
- Написание скриптов Python (SQL-запросы) для сложной обработки и преобразования больших данных;
- Работа с ETL и хранилищами данных;
- Развертывание разработанных решений в производственной среде (ПРОМ) (Jenkins);
- Взаимодействие с аналитиками проекта для определения требований и целей разработки
Ведение технической документации по релизному процессу; - Фиксация договоренностей с заказчиком и поддержание актуальной документации по проектам;
- Поддержка качества данных и обеспечение точности отчетов и наполнения витрин;
- Внедрение разработанных DS-моделей в промышленную среду (MLOps).
МЫ ПРЕДЛАГАЕМ:
- Возможность участия в интересных проектах.
- Возможность профессионального и карьерного роста в компании.
- Опыт работы в команде профессионалов.
- Специальные тарифы для сотрудников в спортивные клубы и языковые курсы и пр.
- Офисный формат работы в Санкт-Петербурге.
Адрес: Россия, Санкт-Петербург
Опубликована 21 день назад
Похожие вакансии
... сопроводительной документации; Что хотим видеть: Знание основных подходов к построению DWH: Кимбалл, Инмон, Data ...
- Полный день
- Опыт от 3 лет
- Санкт-Петербург
10 дней назад
В роли Data Engineer вы будете работать на стыке инженерии, аналитики и бизнеса, помогая командам эффективно ... Опыт построения и эксплуатации надёжных и масштабируемых data pipelines, обрабатывающих большие объёмы ...
- Полный день
- Опыт от 3 лет
- Санкт-Петербург
10 дней назад
... общие принципы + библиотеки для DE); Опыт применения фреймворков для мониторинга и валидации данных (Data ...
- Полный день
- Опыт от 3 лет
- Санкт-Петербург
22 дня назад
ПРОЕКТ: в банковской сфере. ЧТО МЫ ОЖИДАЕМ ОТ КАНДИДАТА: Опыт работы по специальности от 2-х лет; Опыт разработки Python/Spark; Понимание основ облачных технологий и технологий виртуализации и контейнеризации; Опыт с экосистемой Hadoop (HDFS, Hive, S...
- Полный день
- Опыт от 3 лет
- Санкт-Петербург
22 дня назад
Наши основные направления: • Validation & Metrics — инструменты валидации и замера моделей • Data ... Engineering — пайплайны чистки и синтеза данных • Code & Technical Data — генерация кодовых/технических ...
- Полный день
- Опыт от 3 лет
- Санкт-Петербург
19 дней назад