Data Engineer
По договоренности
- Пионерская
- Чёрная речка
- Зенит
iFuture – продуктовая IT-компания, мы разрабатываем собственный международный продукт с многомиллионной аудиторией в сфере спортивной аналитики и развлечений уже на протяжении 29 лет.
Мы ищем опытного инженера данных, который будет играть ключевую роль в построении и поддержке архитектуры хранения и обработки данных.
Если вы умеете работать с большими объемами информации, сложными системами и стремитесь к постоянному улучшению процессов - мы будем рады видеть вас в команде :)
Основные задачи позиции:
- Разработка и поддержка конвейеров обработки данных в рамках существующей архитектуры DWH
- Реализация и оптимизация ETL/ELT-процессов
- Разработка моделей данных и трансформаций на DBT
- Работа с аналитиками: уточнение требований, подготовка витрин, контроль качества данных
- Поддержка метаданных, схем и моделей данных по принятым в команде стандартам
- Участие в код-ревью и agile-процессах команды
Мы ожидаем:
- Опыт в Data Engineering от 3 лет
- Опыт работы с ClickHouse: движки таблиц, партиционирование, написание эффективных запросов
- Уверенный SQL: оконные функции, CTE, чтение планов запросов
- Python для разработки data pipeline'ов
- Опыт работы с Apache Airflow: написание и поддержка DAG'ов
- Понимание принципов DWH: слои, схемы, SCD
- Опыт работы с DBT или готовность быстро освоить
Будет плюсом:
- Опыт работы с Apache Spark и/или Kafka
- Опыт работы с BI-инструментами (Tableau, Power BI, Superset)
- Опыт внедрения тестов и проверок качества данных (dbt tests, Great Expectations)
- Участие в миграции данных или построении хранилища
- Базовое понимание data governance: доступы, lineage, каталогизация
- Умение документировать техническое решение
Мы предлагаем:
- Конкурентоспособную заработную плату
- Гибкую и понятную систему роста между ролями и грейдами, постоянные performance review
- Помощь опытного ментора в период адпатации, индивидуальный план онбординга
- Оформление по ТК РФ с первого рабочего дня в аккредитованную IT-компанию
- Корпоративный ДМС + Стоматология
- Компенсацию занятий любым спортом/фитнесом, корпоративные скидки в сеть фитнес клубов
- Изучение английского языка с преподавателем в офисе или онлайн
- Оплату профильного обучения (курсы, конференции, вебинары, учебники и пр.)
- Гибкий график работы: присутственные часы с 11 до 17 (GMT+3)
- Удобный формат работы – из дома или в комфортном офисе (в 5 минутах от ст.м. Старая Деревня (Санкт-Петербург)
Адрес: Россия, Санкт-Петербург, Липовая аллея, 9
Опубликована 11 часов назад
Похожие вакансии
Вакансии быстро закрываются - скачайте мобильное приложение в RuStore и откликайтесь первыми!
Скачать бесплатноПонимание event-driven data pipelines: очереди, raw events, idempotency, дедупликация, late events. ... Готовность соединить в работе data engineering, AI-инструменты и практическую автоматизацию внутренних ... Желание работать не только над “доставить данные”, но и над надежностью всей data-платформы.
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Санкт-Петербург
4 дня назад
Главные потребители наших данных – data scientist’ы, которые занимаются поиском закономерностей, значимых ... знание SQL и принципов работы классических БД — желание развиваться в BigData и ML — опыт работы в роли Data ... Engineer от 2 лет Какие еще навыки будут полезны в работе: — Hadoop, Spark, YARN, Hive, Impala — noSQL ...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Санкт-Петербург
21 день назад
... направления ИТ-экспертизы: построение высоконагруженных систем, прикладная часть Machine Learning и Data ... работы с Kubernetes проектами; опыт работы с Java; практический опыт участия в проектах по созданию DWH, Data ... Наш стек: ClickHouse, Pythоn, SQL, AirFlow, Spark, Apache Kafka, Yandex Cloud, Big Data, Kubernetes, ...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Санкт-Петербург
месяц назад
Мы формируем отдельное направление мастер-данных и ищем инженера, который поможет построить и развивать его технический контур. Операционные хранилища, интеграционные потоки, история изменений, правила обработки и контроль консистентности данных. Чем...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Санкт-Петербург
6 дней назад
Python, поиск и устранение проблем с производительностью пайплайнов Требования Опыт руководства командой Data ... Engineer от года, от двух человек в прямом подчинении Опыт управления delivery: приоритизация, декомпозиция ... Опыт 1:1, развития сотрудников, performance review, найма и онбординга Сильный технический бэкграунд в Data ...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Санкт-Петербург
6 дней назад