Data Engineer (Риски розничного бизнеса)
По договоренности
Ищем специалиста на позицию Data Engineer для участия в создании и поддержке инфраструктуры данных крупного банка. Будете отвечать за разработку, оптимизацию и поддержку витрин данных, работу с источниками данных и создание эффективных процессов обработки больших объемов информации.
Обязанности
- анализировать источники и метаданные хранилищ Hadoop и Greenplum для формирования витрин данных
- реализовывать и сопровождать витрины данных с использованием технологий Spark/Hadoop и Greenplum
- создавать и поддерживать ETL-процессы загрузки данных из внутренних и внешних систем, разрабатывая инкрементальные сценарии
- организовывать проверку качества данных и метрик (целостность, полнота, отсутствие дублей)
- проводить оптимизацию SQL-запросов и Spark-процессов, выбирая наиболее эффективные способы соединения таблиц и схемы хранения данных
- активно взаимодействовать с командой разработчиков и аналитиками в рамках Agile-процессов
- применять современные инструменты анализа данных и машинного обучения (LLM/GigaChat) для повышения эффективности своей работы.
Требования
- уверенное владение Python и Spark SQL. Опыт работы с Git (GitHub/BitBucket).
- знание SQL, глубокое понимание всех видов JOIN, группировок, агрегатных и оконных функций.
- опыт оптимизации запросов, понимание планов исполнения и методов организации индексов и ключей
- опыт работы с хранилищами данных (DWH), процессами ETL/ELT и методами инкрементальной загрузки данных (CDC)
- навык работы с Jira для управления релизами и организацией рабочего процесса.
Условия
- комфортный современный офис рядом с м. Кутузовская
- офисный формат работы
- ежегодный пересмотр зарплаты, квартальная и годовая премия (премия указывается в зависимости от должности и системы премирования)
- корпоративный спортзал и зоны отдыха
- более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
- программа адаптации и помощь руководителя на старте (для Junior позиций)
- расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
- ипотека выгоднее до 7% для каждого сотрудника
- бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
- вознаграждение за рекомендацию друзей в команду Сбера.
Опубликована 2 дня назад
Похожие вакансии
до 200 000 ₽
Выше средней на 33%
... для исследований Настройка процедур контроля качества и надёжности данных Кого мы ищем: Опыт работы Data ... Engineer от 2-х лет Уверенное знание Python Знание SQL и понимание принципов работы с данными Понимание ... работы с PySpark / Spark Опыт построения ETL-процессов Опыт работы с Airflow Понимание архитектуры DWH / Data ...
- Полный день
- Опыт от 1 года
- Москва
3 дня назад
Автономные технологии — компания, которая разрабатывает инновационные решения, направленные на улучшение и совершенствование робототехники и технологий машинного обучения с применением передовых технологий искусственного интеллекта (ИИ) и уникальных ...
- Полный день
- Опыт от 1 года
- Москва
4 дня назад
Мы- команда департамента интегрированного риск-менеджмента. Наш продукт «Витрины данных» состоит из витрин на Hadoop и GreenPlum, разработкой витрин данных занимаются несколько Agile-команд. Цель витрин: сбор, подготовка и хранение данных, необходимы...
- Полный день
- Опыт от 1 года
- Москва
5 дней назад
Мы стремимся к инновациям и улучшению качества жизни людей по всему миру. вакансия: Data Engineer Чем ... / Data Lake) на базе PostgreSQL, ClickHouse. ... Знание принципов Data Governance и управления качеством данных.
- Полный день
- Опыт от 1 года
- Москва
9 дней назад
от 100 000 ₽
Ищем Data Engineer (CV) для работы в офисном или гибридном формате, готового с головой погрузиться в ...
- Полный день
- Опыт от 1 года
- Москва
7 дней назад