Работа big data engineer в Москве

... обработка и контроль качества разрозненных данных из сотен систем-источников банка в единое хранилище в Data ... опыт работы с оркестраторами (например, Airflow) и CI/CD опыт построения архитектуры данных (например, Data ... и др.) опыт кратной оптимизации spark приложений практический опыт разработки solution-архитектуры data-продуктов ...

О нас и проекте Мы — команда разработки в составе крупного стрима Data Platform. ... Опыт работы с Big Data экосистемой: опыт работы с Apache Spark, понимание принципов оркестрации процессов ...

Зона ответственности: Определение логического и реализация физического уровней архитектуры данных в СУБД Реализация ETL-пайплайнов передачи данных из различных внутренних и внешних ИТ-систем ETL-пайплайнов Построение и поддержка эффективной системы о...

Департамент информационных технологий Москвы создает и развивает цифровые проекты, которые делают столицу комфортнее, а жизнь горожан — удобнее и мобильнее. Для системы управления столицей технологии — это незаменимый инструмент, который применяется ...

Обязанности: Развитие новой функциональности: • Разрабатывать новые ETL/ELT-процессы обработки и доставки данных из корпоративных систем в ядро хранилища. Модифицировать и улучшать существующие процессы; • Разрабывать dbt модели; • Разрабывать DAG в ...

В связи с активным развитием проектов в компании открыта вакансия Data аналитика на проект сбера. ... или аналогичные технологии; • понимание процессов DevOps • опыт интеграции ML-моделей в промышленный data ...

... BIG DATA МТС – место, где телеком данные превращаются в реально работающие IT-продукты. ... Senior Data Scientist в Платформу поиска и рекомендаций ОПИСАНИЕ ПРОДУКТА Платформа Поиска и Рекомендаций ... в прод и по итогам АВ-тестов формулировать новые гипотезы по улучшению рекомендаций; Ставить задачи data ...

... разработки ETL/ELT процессов; Опыт работы с колоночными БД (ClickHouse); Знание принципов построения Data ... Warehouse и Data Lake; Понимание разницы между OLTP/OLAP системами; Уверенная работа c linux и git; ...

В связи с активным развитием проектов в компании открыта вакансия DATA ENGINEER. ... Понимание Data Governance (знакомство с DAMA, подходами к управлению качеством).

Мы — группа аналитики и автоматизации контроля качества пунктов выдачиOzon. За последние несколько лет сеть ПВЗ кратно увеличилась, и перед нами стоит амбициозная задача — следить за тем, чтобы качество росло вместе с масштабом сети. Наше направление...

... ищем DevOps-инженера (от 7 лет опыта) для работы над поддержкой и развитием инфраструктуры крупного Big ... Data-решения.

В связи с активным развитием проектов в компании открыта вакансия Data Engineer. ... ВАМ ПРЕДСТОИТ: Проектировать и разрабатывать новые, а также поддерживать существующие data pipeline’и ... и участвовать в создании дашбордов для отслеживания здоровья данных; Внедрять и развивать практики Data ...

Мы — команда GigaChat Data, готовим данные для обучения базовых моделей GigaChat во всех модальностях ... Обязанности подготовка датасетов для обучения и тестирования моделей разработка и поддержка data pipeline ... преимуществом опыт с image / video / audio данными опыт с LLM или мультимодальными моделями опыт построения data ...

... обработка и контроль качетсва разрозненных данных из сотен систем-истоников банка в единое хранилище в Data ... опыт работы с оркестраторами (например, Airflow) и CI/CD опыт построения архитектуры данных (например, Data ... создания и защиты архитектуры данных будет преимуществом практический опыт разработки solution-архитектуры data-продуктов ...

... обработка и контроль качетсва разрозненных данных из сотен систем-истоников банка в единое хранилище в Data ... опыт работы с оркестраторами (например, Airflow) и CI/CD опыт построения архитектуры данных (например, Data ... создания и защиты архитектуры данных будет преимуществом практический опыт разработки solution-архитектуры data-продуктов ...

Наши ожидания: 3+ года опыта в роли Data Engineer/Backend Developer; Java: уверенное владение для streaming ...

Какие знания и навыки нам важны: Опыт работы Data Engineer от 2 лет. ... Будет плюсом: Data Vault 2.0, оптимизация запросов, Data Lake / DWH, репликация/шардинг, знакомство с ...

Требования опыт работы в качестве Data Engineer / Data Analyst / ETL Developer. знание SQL на продвинутом ...

Требования высшее образование опыт работы Data Engineer от 2–3 лет уверенное владение Apache Spark (версии ...

Мы ищем опытного Data Warehouse Modelling Engineer, который будет проектировать, разрабатывать и поддерживать ... корпоративные модели данных с использованием методологии Data Vault 2.0 в современной ELT-архитектуре ... Обязанности: Проектирование и реализация моделей Data Vault 2.0 (Raw Vault и Business Vault), включая ...

Java-подобного языка - Опыт работы с MPP системами (GreenPlum / Hadoop / StarRocks) - Опыт работы с DBT (Data ...

... . • Строить полный data flow: от получения данных из источников и их транспортировки до обработки, хранения ... тесной связке с DevOps-командой и участвовать в инфраструктурных и архитектурных решениях на стыке Data ... Для нас Data Engineer — это не только работа с данными и написание ETL/ELT-процессов.

... Data Engineer Основные задачи: Создание и наполнение единого хранилища данных Создание, тестирование, ...

... BIG DATA МТС – место, где телеком данные превращаются в реально работающие IT-продукты. ... MIDDLE DATA SCIENTIST В ПРОДУКТ KION ОПИСАНИЕ ПРОДУКТА: Один из ключевых юнитов в Big Data МТС - это ... в прод и по итогам АВ-тестов формулировать новые гипотезы по улучшению рекомендаций Ставить задачи data ...

Сейчас мы в поиске Junior Data Engineer. ... внешних и внутренних источников, Microsoft SQL Server Организация витрин данных для аналитиков с помощью data ...