Ведущий инженер данных / Data engineer (Senior)
По договоренности
- Немчиновка
- Баковка
«М.ТЕХ» - АККРЕДИТОВАННАЯ ИТ-КОМПАНИЯ В ГРУППЕ «М.ВИДЕО-ЭЛЬДОРАДО» разрабатывает более 100 инновационных ИТ-продуктов на основе современной микросервисной и облачной инфраструктуры, больших данных, биометрии, ИИ и машинного обучения для улучшения качества жизни десятков тысяч сотрудников и миллионов покупателей по всей России.
МЫ В ПОИСКЕ ВЕДУЩЕГО ИНЖЕНЕРА ДАННЫХ
Мы относимся к платформе данных кластера Коммерция, извлекаем и доставляем данные, делаем дашборды, создаем DataLake.
Стек команды: PostgreSQL, Greenplum, Clickhouse, Spark, Python, SQL, Airflow, Iceberg, Kafka, Trino, Superset, Tableau, SAP BW/ERP, Docker, Ci/Cd.
ТЕБЕ ПРЕДСТОИТ:
- поддержка и создание интеграций и витрин в рамках хранилища данных;
- построение ETL-процессов;
- подключение новых источников в хранилище данных по стандартизированному процессу;
- создание механизмов проверки качества данных;
- документирование результатов разработки;
- осуществление поддержки имеющихся процессов;
- разбор legacy и перенос на новые инструменты.
ЧТО МЫ ОЖИДАЕМ ОТ КАНДИДАТА:
- знание концепций работы с git и CI/CD процессами;
- знание SQL (временные таблицы, оконные функции, cte и тд), опыт оптимизации запросов;
- знания принципов работы БД, построения ХД, опыт работы с Greenplum;
- опыт разработки ETL процессов (обязательно: Spark);
- опыт работы с табличными форматами хранения (Желательно: Trino, Iceberg, S3).
ЧТО ТЫ ПОЛУЧИШЬ:
- Продукты, признанные на рынке (несколько премий за Лучший Интранет, хит-парад премий за лучшее ИТ-решение в ритейле) и имеющие амбициозные планы на развитие;
- Конструктивный диалог и возможность внедрять свои идеи, если они способствуют достижению общего результата;
- Команду увлеченных профессионалов, которая открыта к поиску нового;
- Конкурентную заработную плату, гибкое отношение к рабочему месту (посещение офиса в Москве на гибриде в Сколково, БЦ Орбион, но ты можешь работать удаленно в пределах РФ);
- ДМС со стоматологией.
Адрес: Россия, Москва, Западный административный округ, Можайский район, Инновационный центр Сколково
Опубликована месяц назад
Похожие вакансии
чем ты будешь заниматься Участвовать в миграции Хранилища данных на новые технологии, используя наш фреймворк. Создавать новые и развивать старые интеграции по загрузке сырых данных в DataLake. Разрабатывать pipline'ов доставки и обработки данных фор...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
23 минуты назад
Объединённая компания Wildberries и Russ — это международная технологическая компания, образованная в результате слияния двух лидеров рынка — IT-компании Wildberries и оператора наружной рекламы Russ. Ищем дата инженера в направление Data Platform! В...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
3 дня назад
300 000 - 380 000 ₽
Выше средней на 13%
LIAN — системный интегратор с фокусом в аналитике и управлении данными. Мы работаем в трех направлениях: 1. Автоматизация управленческой отчетности (BI) в малом и среднем бизнесе. Строим хранилища данных, настраиваем сбор и интеграцию, разрабатываем ...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
4 дня назад
Основная наша цель - это создание и эффективное внедрение ML моделей для решения бизнес - задач в Банке. Мы ищем инженера данных, который поможет обеспечивать ML инженеров надёжными и качественными данными. Вам предстоит организовывать хранение и обр...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
4 дня назад
300 000 - 350 000 ₽
Выше средней на 8%
Обязанности: Выполнение роли разработчика корпоративного аналитического Хранилища данных и роли технического эксперта по миграции ХД с Oracle на новый технологический стек (конфигурация хранилища Iceberg, S3, Clickhouse). Построение и оптимизация цел...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
7 дней назад
Чем предстоит заниматься: Проектирование архитектуры DWH (выбор подхода: Data Vault, Kimball, гибрид) Выбор и обоснование технологического стека Настройка инфраструктуры Разработка первых пайплайнов для интеграции с источниками данных (MSSQL, Postgre...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
6 дней назад
Вакансия в подборках
Похожие вакансии
300 000 - 380 000 ₽