Data Engineer

По договоренности

  • Чернышевская
  • Площадь Восстания
  • Владимирская

В нашей команде дата-инженеры занимаются организацией данных и витрин для их получения. Главные потребители наших данных – data scientist’ы, которые занимаются поиском закономерностей, значимых признаков в данных и тренировкой моделей машинного обучения. Сейчас мы активно расширяем команду и приглашаем к сотрудничеству Дата Инженеров!

Стек: Apache Airflow, Apache Spark, Apache Kafka, Apache Flink, ClickHouse, Kubernetes, Hive, Impala, Zeppelin, HUE, Scala и Python.

Задачи:

— проектирование и построение DWH
— подготовка витрин данных для отчетности, бизнеса и дата аналитики
— организация пайплайнов сбора данных от бэкендов и других хранилищ
— организация пайплайна подготовки датасетов для обучения ML моделей
— организация мониторинга компонентов корпоративной платформы данных
— разработка ETL/ELT пайплайнов и поддержка существующих

Что мы ожидаем
— Java8+, Scala (один из языков на хорошем уровне)
— знание алгоритмов и структур данных
— знание SQL и принципов работы классических БД
— желание развиваться в BigData и ML
— опыт в роли tech lead/управленческий опыт будет плюсом


Какие еще навыки будут полезны в работе:
— Python
— Hadoop, Spark, YARN, Hive, Impala
— noSQL базы: Cassandra, Elastic
— анализ данных при помощи Python-ноутбуков Jupyter, Zeppelin
— работа с очередями сообщений: Kafka, Rabbit, JMS

Твои возможности в Koronatech

— понятная траектория роста (оценка эффективности, карьерные консультации, индивидуальная карта развития и т.д.);
— обучение и развитие за счёт ресурсов компании (Учебный центр, корпоративная библиотека, оплата внешнего обучения);
— социальный пакет (ДМС после ИС, скидки от партнёров, детская программа и т.д.);
— насыщенная корпоративная жизнь (радио, подкасты, кибертурнир, собственные мероприятия и участие в крупных событиях отрасли);
— возможность быть преподавателем, наставником, автором корпоративного блога, спикером – каждый выбирает то, что подходит именно ему;
— официальное трудоустройство с первого дня, полностью белая зарплата;
— удобный формат работы (удаленно или офисе/в гибридном формате).


Адрес: Россия, Санкт-Петербург, Владимирский проспект, 21
Показать на большой карте

Поделиться:

Опубликована 9 часов назад

Похожие вакансии

... развивающая проекты и решения в сфере медиабаинга и партнёрского маркетинга Мы растем, поэтому мы в поисках Data ... Engineer в отдел BI-аналитики. ... Наши ожидания: От 2-х лет опыта работы Data Engineer; Хорошее знание Clickhouse, Postgres, Python, Pandas ...
  • Можно удаленно
  • Полный день
  • Опыт от 3 лет
Логотип компании LuckyGroupLuckyGroup
  • Санкт-Петербург
9 дней назад
В нашу DREAM TEAM для реализации амбициозных планов по развитию требуется Data Engineer / Аналитик данных ... аналитическими БД (ClickHouse / PostgreSQL / BigQuery и др.); Понимание принципов ETL и построения data ...
  • Можно удаленно
  • Полный день
  • Опыт от 3 лет
Логотип компании Prime SportPrime Sport
  • Санкт-Петербург
6 дней назад
... данных с Qlik Replicate (CDC, стриминг в Kafka/Redshift); настройка источников (SQL, NoSQL) и целей (data ... Требования: опыт в data engineering от 3-х лет; опыт с (Qlik) Replicate/Talend от 1 года; опыт с SQL, ... Java/Python; опыт с data modeling (star schema); опыт full lifecycle ETL.
  • Можно удаленно
  • Полный день
  • Опыт от 3 лет
Логотип компании IBSIBS
  • Санкт-Петербург
9 дней назад
... направления ИТ-экспертизы: построение высоконагруженных систем, прикладная часть Machine Learning и Data ... работы с Kubernetes проектами; опыт работы с Java; практический опыт участия в проектах по созданию DWH, Data ... Наш стек: ClickHouse, Pythоn, SQL, AirFlow, Spark, Apache Kafka, Yandex Cloud, Big Data, Kubernetes, ...
  • Можно удаленно
  • Полный день
  • Опыт от 3 лет
Логотип компании Петрович-ТехПетрович-Тех
  • Санкт-Петербург
21 день назад
... работы с Scala Dataframe/Dataset API Опыт построения и оркестрации ETL-процессов для обработки Big Data ...
  • Можно удаленно
  • Полный день
  • Опыт от 3 лет
Логотип компании WaveAccessWaveAccess
  • Санкт-Петербург
23 дня назад
Мы обрабатываем данные посетителей и используем куки в соответствии с политикой конфиденциальности.