Старший инженер данных
По договоренности
Нужен Data Engineer, который сможет взять на себя часть непрофильной для аналитиков работы по автоматизации отчётов, превращению моделей в сервисы, оптимизации запросов, а также сможет выстроить процесс код ревью, CI\CD Pipeline.
Наш стек: MPP (Vertica, ClickHouse), Python+ Airflow, Hive, PySpark.
Вам предстоит:
- Проектирование и разработка витрин данных для анализа и моделирования;
- Оптимизация процессов ETL, система мониторинга обновления витрин и источников данных;
- Изучение способов повышения качества и надёжности данных;
- Предоставление экспертной поддержки по оптимизации обработки данных на клиенте: Jupyter + Python;
- Поддержка и развитие базы знаний.
Мы ожидаем:
- Обязательный стек, с которым ты работал: Hadoop, Spark (Pyspark)
- Отлично знаешь SQL, знаком с Vertica, Clickhouse, владеешь концепцией DWH.
- Умеешь программировать на Python.
- Знаком с командной строкой Unix-систем.
- Есть опыт работы с BI-инструментами: в идеале Superset, но опыт с другими BI тоже подойдет, если ты готов осваивать новый инструмент.
- Работал с Airflow
- Хорошо представляешь, как работает e-com.
- Способен взять ответственность свое направление и готов к самостоятельному решению задач с большой степенью неопределенности.
Адрес: Россия, Москва, Центральный административный округ, Пресненский район, Московский международный деловой центр Москва-Сити, многофункциональный комплекс Башня на Набережной
Опубликована день назад
Похожие вакансии
Вакансии быстро закрываются — подпишитесь на наш канал в MAX сейчас, чтобы видеть их первыми.
Подписаться в MAX Функциональные обязанности: Управление инфраструктурой рабочих станций и серверов на базе ОС Linux с использованием SaltStack Установка и настройка ОС семейства Linux Администрирование систем виртуализации на базе oVirt. Администрирование системы рез...
- Полный день
- Опыт от 3 лет
- Москва
день назад
Национальная технологическая инициатива - это экосистема, объединяющая лидеров бизнеса и экспертные сообщества, которые формируют будущее передовых технологий в России. В экосистему входят: Платформа НТИ - занимается поддержкой технологических проект...
- Полный день
- Опыт от 3 лет
- Москва
день назад
Приглашаем Старшего инженера-сметчика для работы на проекте «РПК-Высоцк ЛУКОЙЛ (распределительный перевалочный ...
- Полный день
- Опыт от 3 лет
- Москва
21 час назад
от 140 000 ₽
Узнайте больше о сервисе на сайте http://fonmix.ru/ Обязанности: Организация работы группы сервисных инженеров ...
- Полный день
- Опыт от 3 лет
- Москва
день назад
210 000 ₽
Выше средней на 31%
Обязанности: Участие в разработке ЗнП/ЗнК в части конструктивных решений; Подготовка ТЗ на выполнение изысканий для строительства; Рассмотрение разделов конструктивные решения (КЖ, КМ, КР, ТЗК, расчеты строительных конструкций) па стадиях ПД и РД в с...
- Полный день
- Опыт от 3 лет
- Москва
день назад
Вакансия в подборках
Похожие вакансии
от 140 000 ₽