Data Engineer
По договоренности
ИТ B2C — самая крупная экосистема в Сбере. Нас более 8000 человек в 18 городах России. Мы занимаемся разработкой и развитием розничных решений, помогая сделать сервисы Банка доступнее, безопаснее и удобнее.
Ждем именно тебя!
Мы создаем платформу данных для запуска персональных предложений на розничных клиентов Сбера.
Разрабатываем витрины данных, дата-пайплайны и внутренние инструменты на составном техстеке (Hadoop, Greenplum, Kafka, Spark), работаем с огромными объёмами данных (десятки и сотни Тб).
Обязанности
- сбор данных из систем-источников (анализ атрибутного состава, качества данных, выбор систем-источников, выбор методов загрузки, реализация механизмов загрузки)
- работа с разнородными источниками, написание SQL-запросов
- разработка новых промышленных витрин данных и их прототипов на основе подготовленных источников
- подготовка исправлений промышленных витрин данных и формирующих их процессов
- подготовка тест-кейсов и сверочных отчетов по разным методикам
- участие в тестировании от разработки до внедрения в промышленную эксплуатацию
- оптимизация существующих таблиц и процедур
- подготовка и исправление технической документации
- подготовка проверок контроля качества данных на основе внедренных витрин.
Требования
- знание SQL на уровне разработчика
- опыт работы с Jira и процессами DevOps
- опыт разработки витрин данных в АС Greenplum или похожих СУБД (Teradara,Oracle, SAS EG и др.)
- опыт разработки витрин данных в Hadoop;
- навыки проведения приемо-сдаточных испытаний и интеграционно-функционального тестирования
- опыт работы с ETL-инструментами (Informatica PC, Oracle Data Integrator итд.)
- общее понимание BigData и Hadoop
- опыт разработки и общее понимание процессов с точки зрения архитектуры
- понимание методологии Agile.
Условия
- офисный формат работы
- Годовой бонус и ежегодный пересмотр
- Расширенный ДМС с первого дня + стоматология и льготное страхование для семьи
- Корпоративный университет Сбера, внутренняя образовательная платформа, участие в IT-конференциях
- Льготная ипотека в Сбере, корпоративная пенсионная программа, подписка СберПрайм+, скидки от партнеров и сервисов группы компаний.
Опубликована 3 дня назад
Похожие вакансии
... имеете опыт работы c Airflow; понимаете принципы работы с колоночными БД; имеете базовое понимание data ...
- Полный день
- Опыт от 3 лет
- Москва
3 дня назад
до 210 000 ₽
Рыночная зарплата
В связи с активным развитием проектов в компании открыта вакансия Data Engineer/Data аналитика. ... Будет большим плюсом: Понимание Data Governance (знакомство с DAMA, подходами к управлению качеством) ...
- Полный день
- Опыт от 3 лет
- Москва
5 дней назад
Каждый день наши автономные машины собирают терабайты данных, которые мы собираем и анализируем для улучшения и тестирования нашего ПО. Мы ищем человека, который поможет нам в этой задаче и будет заниматься разработкой пайплайнов обработки данных и д...
- Полный день
- Опыт от 3 лет
- Москва
день назад
AERO — провайдер e-commerce и data-решений. ... (K8s), Debezium VCS: Git (GitLab) Подходы: Data Vault / Business Data Vault И место для технологии, ... Будет плюсом: опыт со streaming (Kafka), CDC (Debezium), Spark, K8s, Data Vault.
- Полный день
- Опыт от 3 лет
- Москва
21 час назад
Какие знания и навыки нам важны: Опыт работы Data Engineer от 2 лет. ... Будет плюсом: Data Vault 2.0, оптимизация запросов, Data Lake / DWH, репликация/шардинг, знакомство с ...
- Полный день
- Опыт от 3 лет
- Москва
6 дней назад
Вакансия в подборках
Похожие вакансии
до 210 000 ₽