Data Engineer / ETL Developer
260 000 - 300 000 ₽
«Brief» - это дружная команда единомышленников, где опытные специалисты и начинающие таланты вместе создают сервисы для лидеров российского бизнеса. Мы реализуем разноплановые проекты, среди которых сервисы для автомобильной промышленности, доставки еды, крупные международные банковские, строительные и металлургические проекты, и многие другие.
Успех компании «Бриф» — это совместные усилия всей нашей команды, которая нацелена на развитие и постоянный поиск новых подходов и технологий.
В связи с расширением штата, открываем поиск "Data Engineer"
Обязанности:
- Адаптация SQL-запросов для переноса на движок Trino;
- Разработка пайплайнов с использованием инструментов DBT и Airflow;
- Поиск и устранение проблем, возникающих при миграции;
- Перенос накопленных исторических данных.
Требования:
- Опыт коммерческой эксплуатации технологий Vertica, Trino, DBT и формата Iceberg;
- Отличное владение языком SQL, включая работу с оконными функциями;
- Опыт коммерческого проекта с инструментом DBT;
- Практический опыт работы с базами данных Vertica, движком запросов Trino и хранилищем объектов S3;
- Умение эффективно применять формат хранения данных Iceberg;
- Базовая компетентность в работе с инструментами оркестрации данных Airflow;
- Владение системой контроля версий Git (операции pull, push, работа с ветками, сброс изменений и др.).
Будет плюсом:
- Наличие опыта разработки на Python;
- Навыки работы с фреймворком Spark.
Условия:
- Оформление по ТК РФ, самозанятый, ИП;
- Стабильный высокий доход, который обсуждается по итогам собеседования;
- Гибкий график: удаленная работа;
- Сложные и интересные задачи, современный стек технологий;
- Возможность карьерного роста до руководителя направления со своей командой;
- Возможность обучения, посещения выставок.
Опубликована 22 дня назад
Похожие вакансии
Ваши задачи: Проектировать, разрабатывать и поддерживать ETL/ELT-пайплайны; Настраивать процессы доставки изменений данных (CDC) из транзакционных баз (PostgreSQL, MongoDB); Проектированием схем, настройкой кластера (шардирование, репликация), оптими...
- Можно удаленно
- Полный день
- Опыт от 5 лет
- Москва
11 часов назад
Мы ищем data engineer’а в команду, занимающуюся развитием ML-подходов в страховании. Если у вас хорошая математическая подготовка, вы любите анализировать большие объемы данных и хотите получить опыт участия в полном цикле разработки ML-решений, а та...
- Можно удаленно
- Полный день
- Опыт от 5 лет
- Москва
5 часов назад
Наш клиент, крупная международная FMCG-компания, находится в поиске Lead Data Engineer. Основная задача: Проектирование домена и разработка базы данных для Отдела Продаж на основе корпоративной платформы данных в хранилище S3. Задачи: Исследовать биз...
- Можно удаленно
- Полный день
- Опыт от 5 лет
- Москва
5 часов назад
Приглашаем в дружную профессиональную команду ETL разработчика. Вам предстоит: • Настраивать процессинг данных в рамках принятой модели DWH; • Проектировать и разрабатывать целевые витрины для конечных пользователей и data продуктов; • Рефакторинг и ...
- Можно удаленно
- Полный день
- Опыт от 5 лет
- Москва
11 дней назад
В команду, занимающуюся анализом и хранением данных, ищем человека на роль Data Engineer. Основной задачей будет построение и оптимизация ETL-процессов на базе YTsaurus-стека технологий. Задачи Построение новых и оптимизация старых ETL-процессов Учас...
- Можно удаленно
- Полный день
- Опыт от 5 лет
- Москва
20 дней назад