Старший инженер данных
По договоренности
Чем предстоит заниматься:
- Интеграция источников данных по голосовым и текстовым коммуникациям клиентов со специалистами обслуживания и поддержки;
- Реализация пакетных и потоковых сервисов обработки данных для оценки качества коммуникаций;
- Создание витрин данных для моделей машинного обучения;
- Эффективное взаимодействие в составе команды со специалистами по анализу данных и специалистами по развитию инфраструктуры.
- Опыт анализа данных - изучение семантики и связи таблиц и объектов данных, характеризующих общие бизнес-процессы, но находящихся в разных хранилищах, выявления причин расхождения семантически эквивалентных данных в разных хранилищах;
- Высокий уровень знаний языка программирования Python;
- Опыт реализации промышленных отказоустойчивых сервисов пакетной загрузки и трансформации данных (ETL) под управлением оркестратора задач Apache Airflow;
- Понимание принципов микросервисной архитектуры;
- Понимание принципов распределенных вычислений и обработки данных;
- Понимание принципов потоковой обработки данных;
- Хорошее знание платформы Apache Spark – опыт использования библиотеки pyspark;
- Знание и опыт использования платформы потоковой обработки данных Apache Kafka;
- Отличное знание SQL – создание сложных запросов с использованием табличных выражений (CTE) и оконных функций;
- Хорошее знание и опыт использования реляционных баз данных Oracle или PostgreSQL;
- Понимание особенностей обработки и хранения аналитических данных (OLAP), понимание отличий колоночных баз данных от строковых, знание колоночных форматов хранения данных – parquet, orc;
- Хорошее знания и опыт использования хранилищ больших данных – Hadoop/HDFS, S3 - оба, форматы таблиц Hive часть хадупа, Iceberg.
- Стабильный и прозрачный доход: размер заработной платы обсуждается по итогам собеседования;
- Возможен удаленнй формат работы или гибрид;
- Сложные и интересные задачи, современный стек технологий;
- Возможность вертикального и горизонтального карьерного роста: регулярно проходят тренинги, вебинары, митапы и демо-дни;
- Доступ к бесплатным корпоративным библиотекам Alpina Digital, MyBook и бизнес-изданий;
- Предложения от Банка только для сотрудников: собственный спортзал, а также скидки на услуги туристических агентств, продукты питания, в рестораны, бары, магазины.
Опубликована 20 дней назад
Похожие вакансии
Вакансии быстро закрываются - скачайте мобильное приложение в RuStore и откликайтесь первыми!
Скачать бесплатноМы ищем Старшего инженера инфраструктуры в команду, которая отвечает за стабильность и развитие инфраструктурных ...
- Можно удаленно
- Полный день
- Опыт от 3 лет
Positive Technologies- Москва
день назад
от 268 583 ₽
Выше средней на 51%
Обязанности: Сопровождение операционных систем и системного окружения; Сопровождение платформ контейнеризации; Сопровождение систем автоматизации управления серверными операционными системами; Сопровождение платформ доставки web-приложений. Требовани...
- Можно удаленно
- Полный день
- Опыт от 3 лет
Группа «Интер РАО»- Москва
9 часов назад
Компания: Группа компаний Fordewind — быстрорастущая технологическая финансовая компания, основанная в 2017 году. Мы специализируемся на кредитовании и инвестиционно-банковских услугах для корпораций, малого и среднего бизнеса. Наша команда управляет...
- Можно удаленно
- Полный день
- Опыт от 3 лет
МФК Фордевинд- Москва
4 дня назад
МТС Банк развивает цифровые финансовые сервисы и делает их доступными для всех. Мы работаем с современным технологическим стеком, высоконагруженными системами и облачной инфраструктурой. Такой подход позволяет создавать надёжные решения для бизнеса и...
- Можно удаленно
- Полный день
- Опыт от 3 лет
МТС Банк- Москва
6 дней назад
Компания «Интер РАО — Цифровые решения» – аккредитованная ИТ-компания, специализирующаяся на разработке, внедрении и сопровождении прикладных информационных систем, веб-приложений и мобильных решений для Группы компаний «Интер РАО». Основной вид деят...
- Можно удаленно
- Полный день
- Опыт от 3 лет
Интер РАО - Цифровые решения- Москва
6 дней назад
Вакансия в подборках
Похожие вакансии
Positive Technologiesот 268 583 ₽
Группа «Интер РАО»МФК Фордевинд