Старший инженер данных
По договоренности
Чем предстоит заниматься:
- Интеграция источников данных по голосовым и текстовым коммуникациям клиентов со специалистами обслуживания и поддержки;
- Реализация пакетных и потоковых сервисов обработки данных для оценки качества коммуникаций;
- Создание витрин данных для моделей машинного обучения;
- Эффективное взаимодействие в составе команды со специалистами по анализу данных и специалистами по развитию инфраструктуры.
- Опыт анализа данных - изучение семантики и связи таблиц и объектов данных, характеризующих общие бизнес-процессы, но находящихся в разных хранилищах, выявления причин расхождения семантически эквивалентных данных в разных хранилищах;
- Высокий уровень знаний языка программирования Python;
- Опыт реализации промышленных отказоустойчивых сервисов пакетной загрузки и трансформации данных (ETL) под управлением оркестратора задач Apache Airflow;
- Понимание принципов микросервисной архитектуры;
- Понимание принципов распределенных вычислений и обработки данных;
- Понимание принципов потоковой обработки данных;
- Хорошее знание платформы Apache Spark – опыт использования библиотеки pyspark;
- Знание и опыт использования платформы потоковой обработки данных Apache Kafka;
- Отличное знание SQL – создание сложных запросов с использованием табличных выражений (CTE) и оконных функций;
- Хорошее знание и опыт использования реляционных баз данных Oracle или PostgreSQL;
- Понимание особенностей обработки и хранения аналитических данных (OLAP), понимание отличий колоночных баз данных от строковых, знание колоночных форматов хранения данных – parquet, orc;
- Хорошее знания и опыт использования хранилищ больших данных – Hadoop/HDFS, S3 - оба, форматы таблиц Hive часть хадупа, Iceberg.
- Стабильный и прозрачный доход: размер заработной платы обсуждается по итогам собеседования;
- Возможен удаленнй формат работы или гибрид;
- Сложные и интересные задачи, современный стек технологий;
- Возможность вертикального и горизонтального карьерного роста: регулярно проходят тренинги, вебинары, митапы и демо-дни;
- Доступ к бесплатным корпоративным библиотекам Alpina Digital, MyBook и бизнес-изданий;
- Предложения от Банка только для сотрудников: собственный спортзал, а также скидки на услуги туристических агентств, продукты питания, в рестораны, бары, магазины.
Опубликована 6 часов назад
Похожие вакансии
Вакансии быстро закрываются - скачайте мобильное приложение в RuStore и откликайтесь первыми!
Скачать бесплатноРositive Technologies — компания с двадцатилетней историей в сфере информационной безопасности.Мы разрабатываем продукты и сервисы в области противодействия современным киберугрозам. Создаем решения и технологии, которые защищают от злоумышленников и...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
5 дней назад
Мы разрабатываем флагманский продукт компании YADRO – TATLIN.UNIFIED. Это современное хранилище данных (СХД), созданное для решения задач традиционных корпоративных приложений, больших данных и аналитики. Продукт развертывается в ЦОД, публичных и час...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
2 дня назад
Компания: Группа компаний Fordewind — быстрорастущая технологическая финансовая компания, основанная в 2017 году. Мы специализируемся на кредитовании и инвестиционно-банковских услугах для корпораций, малого и среднего бизнеса. Наша команда управляет...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
5 дней назад
180 000 - 250 000 ₽
Выше средней на 19%
Мы ищем старшего инженера, который сочетает глубокое понимание бизнес-логики производственных систем ...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
7 дней назад
Приглашаем в команду Сетевого инженера (CCNP) на сменный график работы.
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
8 дней назад
Вакансия в подборках
Похожие вакансии
180 000 - 250 000 ₽