Работа инженером данных в Москве

Сейчас мы находимся в поиске Инженера данных в одно из наших подразделений – Центр обработки и автоматизации ... В качестве Инженера данных вы будете отвечать за разработку и поддержку систем хранения данных, оптимизацию ... Требования: Опыт работы инженером данных от 2 лет; Уверенное владение Python и опыт работы с библиотеками ...

Обязанности: Проектирование и разработка ETL/ELT: Создание, поддержка и оптимизация пайплайнов обработки данных ... данных на всех этапах пайплайна; Документация: Ведение технической документации. ... ) и качества данных.

ELT‑потоков (Airflow, dbt); Управление метаданными: создание data catalog, документирование lineage данных ... ; Обеспечение Data Quality: валидация данных на всех этапах, настройка алертов при аномалиях; VictoriaMetrics ... с 1С, работа с 1С OData, REST, SQL; Опыт интеграций с REST источниками данных (сайты, сервисы), с SQL ...

Организовывает развитие информационно-аналитических ресурсов Банка России, связанных с предоставлением данных ... формирование бизнес и функциональных требований; опыт проектирования и реализации прототипов витрин данных ... ; наличие опыта подготовки интеграционных функциональных требований по передаче данных.

... данных Работать с неструктурированными данными (тексты, PDF, логи, аудио) 3. ... Качество данных и валидация Разрабатывать системы контроля качества данных (data quality) Внедрять проверки ... данных для ML; Контроля качества данных; Основ распределенных систем; Разработки data-pipeline; ETL/ ...

... к разработке моделей данных и отчетов Создание моделей данных для отчетов в SQL (табулярные и многомерные ... модели данных) Обеспечение соответствия данных поставленным требованиям Документирование разработок, ... организации Самостоятельное изучение новых технологий и инструментов в области инженерии данных Требования ...

... центре обеспечения развития строительной отрасли (ГБУ "Мосстройразвитие") открыта вакансия ведущего инженера-проектировщика ... баз данных Организация является учреждением, реализующим и координирующим решение вопросов аналитического ... с интеграцией ИИ-алгоритмов Сопровождение базы данных PostgreSQL Осуществление мониторинга данных на ...

... хранилищ данных: Lambda-архитектура, Data Lake, Data Vault. ... критичные аномалии в данных. ... основные алгоритмы и структуры данных (особенно те, которые используются в работе с большими данными ...

... разрабатываем аналитические системы на базе единой платформы, которые позволяют безопасно работать с данными ... Она обеспечивает высокий уровень потоковой обработки и хранения данных, управления доступом и метаданными ... Обязанности: Проведение тестирования различных компонентов продукта (витрины данных, внешние и внутренние ...

Каждый день мы обрабатываем сотни терабайт данных для проведения исследований, АВ-экспериментов, обучения ... Вам предстоит: Погружаться в данные, их природу, качество и способ поставки; Взаимодействовать от лица ... команды с платформой данных для организации транспорта и интеграций; Отвечать за качество данных, на ...

Компания АО «НПО РусБИТех» разрабатывает передовые технологические решения и инновационные продукты для повышения эффективности и безопасности в критически важных отраслях промышленности и инфраструктуре нашей страны _________________________________...

Обязанности: реализация в тандеме с архитектором физического уровня архитектуры данных в DWH для всех ... Требования: Опыт работы от 3х лет; базовые навыки в области инженерии данных; системное аналитическое ... ; опыт получения данных из различных типов API; опыт работы с потоковой обработкой данных; умение работать ...

Чтобы миллионы пользователей могли решать свои задачи в сервисе, мы обрабатываем большой поток данных ... Эти данные лежат в основе аналитики, продуктовых решений и ежедневной работы внутренних команд. ... Задача DWH-команды — обеспечить стабильность процессов и надёжность данных для развития сервиса.

В задачи на данной позиции будет входить: Обеспечение бесперебойной работы корпоративной инфраструктуры ... сетей передачи данных: Устранение неисправностей и решение проблем с сетью.

... данных, улучшению архитектуры и обучению пользователей инструментам и практикам управления данными Мы ... концептуальных, логических и физических моделей данных Опыт описания источников данных и разработки ... правил проверки качества данных Опыт работы с BI-инструментами и системами управления данными Уверенные ...

Мы в «Градиенте» ценим системный подход и уверенность в работе с данными. ... Сейчас нам нужен специалист, который сможет поддерживать и развивать инфраструктуру обработки данных, ... таблиц, участием в проектировании моделей данных вместе с аналитиками.

Вы будете: Проектировать и разрабатывать витрины данных Проектировать, разрабатывать и поддерживать процессы ... новые источники данных в Data Lake Разрабатывать механизмы контроля качества загружаемых данных (ручные ... и принципов разработки DWH Понимание хранилищ данных, очистки данных, конвейеров данных и других аналитических ...

Что будем делать: Анализировать данные в источниках и участвовать в разработке целевой модели данных; ... – AirFlow, Nifi, SSIS или другие; Желательно знание и опыт работы с Python и библиотеками обработки данных ... Опыт работы аналитиком данных будет плюсом ...

... страны сервисы и услуги медицинского направления и системы для здравоохранения страны Нам требуется инженер ... /администратор данных: Стек технологий: JS, SQL, Python, Postgres, ETL Airflow/NiFi, Data Analysis, Data ...

Основная цель – разработка витрин данных и дата продуктов (операционный блок). ... Наш стек: Базы данных: GreenPlum, ClickHouse; ETL: Airflow, Spark, PL/pgSQL; Объектное хранилище: HDFS ... данных, реализацию ETL для data - продуктов, а также обеспечение их эффективной работы.; Мониторинг ...

Наши решения позволяют работать с большими объёмами данных, быстро получать информацию, автоматизировать ... принятие управленческих решений и осуществлять опережающее управление на основе данных. ... Обязанности: поддерживать работоспособность ПО Витрин данных в выделенной инфраструктуре ЦОД; производить ...

Погрузиться в процессы работы курьерской доставки • Моделировать и контролировать качество доменных данных ... потоки данных • Кросс-функциональная коллаборация с бизнес-, дата-аналитиками, разработчиками и т.д. ... • Опыт работы с потоковыми данными/очередями (Kafka, RabbitMQ и т.д.) ...

Обязанности: Формирование логической и физической модели данных; Исследование данных в источниках (1С ... , SQL, rest api, excel); Создание пайплайнов загрузки данных на PySpark+AirFlow+DBT; Описание алгоритмов ... преобразования данных.

Команда Негосударственного Пенсионного Фонда Сбера находится в поисках опытного аналитика данных, готового ... Идеальный кандидат для нас: Опыт работы по данному направлению от 2 лет; Знание принципов устройства ... баз данных, параллельной архитектуры, типов данных; Знание математической статистики, методов анализа ...

... места Работать с Docker контейнерами Внедрять и настраивать CDC (Change Data Capture) для синхронизации данных ... владение Python и SQL Умение работать с Docker контейнерами и Apache Airflow Опыт работы с большими данными ... реляционными БД: PostgreSQL (проектирование схем, оптимизация запросов) Умение проектировать схемы данных ...