Работа инженером данных в Москве от прямых работодателей

Основная цель – разработка витрин данных и дата продуктов (операционный блок). ... Наш стек: Базы данных: GreenPlum, ClickHouse; ETL: Airflow, Spark, PL/pgSQL; Объектное хранилище: HDFS ... данных, реализацию ETL для data - продуктов, а также обеспечение их эффективной работы.; Мониторинг ...

... страны сервисы и услуги медицинского направления и системы для здравоохранения страны Нам требуется инженер ... /администратор данных: Стек технологий: JS, SQL, Python, Postgres, ETL Airflow/NiFi, Data Analysis, Data ...

Нормализация и обогащение событий безопасности; Проектирование и оптимизация аналитического хранилища данных ... (ClickHouse / StarRocks / аналоги); Подготовка витрин данных под быстрые запросы и аналитику; Эксплуатация ... Kubernetes: деплой, ресурсы, отказоустойчивость, масштабирование; Обеспечение наблюдаемости и качества данных ...

В дирекции по управлению данными открыта позиция аналитик данных/инженер по качеству данных. ... В нашей команде тебе предстоит: Сбор прототипов витрин данных; Разработка и оптимизация SQL-запросов ... для извлечения данных из различных источников; Анализ и интерпретация больших объемов данных для выявления ...

Команда, в которой предстоит работать Наш отдел управления данными — это микс из data-инженеров, аналитиков ... командой (проводить ДЕМО, писать документацию) Что для этого потребуется: Опыт работы в качестве дата-инженера ... новичкам помогают старшие коллеги Внутренние комьюнити: 2 трека внутренних митапов для аналитиков и инженеров ...

Мы занимаемся организацией жизненного цикла данных - от поставки в аналитическое хранилище до охлаждения ... Проектируем и реализуем архитектуру хранилища, развиваем процессы контроля качества и защиты данных. ... Являемся амбассадорами культуры работы с данными и хороших инженерных практик в целом.

ETL-трансформаций для большого кол-ва разных типов источников; Опыт разработки ETL, обрабатывающий большие данные ... Наши инженеры выступают на ведущих конференциях России и Европы и вносят вклад в Open Source проекты, ...

Вам предстоит: изучать существующие потоки данных в направлении, разрабатывать и развивать ETLсистемы ... , обеспечивающие информацию для различных предметных областей анализировать данные; заниматься дизайном ... компании, которые стоят за конкретными данными; самостоятельность в решении поставленных задач.

Проектирование и разработка ETL/ELT-паплайнов для обработки структурированных и неструктурированных данных ... (тексты, изображения, видео); Организация и поддержка хранилища данных, включая объективные, реляционные ... Требования: Высшее образование (математика, компьютерные науки, физика, инженерия и смежные области); ...

... , их валидация на исторических данных, подбор оптимальных гиперпараметров. • Интеграция разработанных ... Знание методов обработки данных (подготовки датасетов для обучения), метрик оценки качества. ... . • Опыт аналитической работы с данными, понимание методов математической статистики.

Мы используем большие объёмы данных для анализа информации, включая отчётность кредитных организаций, ... данные бюро кредитных историй, информацию от иных организаций и публичных источников. ... ; формирование базы данных мониторинга кредитных рисков; подготовка статистики на основе данных бюро ...

В связи с расширением приглашаем в команду ИТ Инженера баз данных. ... Ключевая задача: спроектировать и реализовать надёжный пайплайн данных из корпоративной PostgreSQL или ... Понимание основ информационной безопасности при передаче данных.

ELT‑потоков (Airflow, dbt); Управление метаданными: создание data catalog, документирование lineage данных ... ; Обеспечение Data Quality: валидация данных на всех этапах, настройка алертов при аномалиях; VictoriaMetrics ... с 1С, работа с 1С OData, REST, SQL; Опыт интеграций с REST источниками данных (сайты, сервисы), с SQL ...

... темы; Непосредственное участие в разработке аппаратно-программных телекоммуникационных систем передачи данных ...

Сейчас мы находимся в поиске Инженера данных в одно из наших подразделений – Центр обработки и автоматизации ... В качестве Инженера данных вы будете отвечать за разработку и поддержку систем хранения данных, оптимизацию ... Требования: Опыт работы инженером данных от 2 лет; Уверенное владение Python и опыт работы с библиотеками ...

Обязанности: Проектирование и разработка ETL/ELT: Создание, поддержка и оптимизация пайплайнов обработки данных ... данных на всех этапах пайплайна; Документация: Ведение технической документации. ... ) и качества данных.

ЧЕМ ПРЕДСТОИТ ЗАНИМАТЬСЯ: Работа с хранилищем данных – разработка архитектуры, формирование новых витрин ... Опыт работы в компаниях финансового сектора в области управления данными/управления кредитным риском ... , оптимизация процессов обработки данных, подготовка требований к качеству данных) Опыт работы с ETL-процессами ...

В компании ООО "Трансстроймеханизация" открыта вакансия ИНЖЕНЕРА в группу методологии и баз данных в ... хронометражных наблюдений с выездами непосредственно на объекты строительства; камеральная обработка данных ... , внесение изменений в действующие справочники и базы данных; разработка/ актуализация, внедрение, адаптация ...

... данных Работать с неструктурированными данными (тексты, PDF, логи, аудио) 3. ... Качество данных и валидация Разрабатывать системы контроля качества данных (data quality) Внедрять проверки ... данных для ML; Контроля качества данных; Основ распределенных систем; Разработки data-pipeline; ETL/ ...

Обязанности: Работа с базами данных (MS SQL Server, Postgres), настройка взаимодействия между распределенными ...

Акционерное общество «Научно-производственный центр автоматики и приборостроения имени академика Н. А. Пилюгина» (АО «НПЦАП», входит в состав ГК «Роскосмос») — это мощная интегрированная структура, один из лидеров ракетно-космической отрасли России. ...

... центре обеспечения развития строительной отрасли (ГБУ "Мосстройразвитие") открыта вакансия ведущего инженера-проектировщика ... баз данных Организация является учреждением, реализующим и координирующим решение вопросов аналитического ... с интеграцией ИИ-алгоритмов Сопровождение базы данных PostgreSQL Осуществление мониторинга данных на ...

... хранилищ данных: Lambda-архитектура, Data Lake, Data Vault. ... критичные аномалии в данных. ... основные алгоритмы и структуры данных (особенно те, которые используются в работе с большими данными ...

... к разработке моделей данных и отчетов Создание моделей данных для отчетов в SQL (табулярные и многомерные ... модели данных) Обеспечение соответствия данных поставленным требованиям Документирование разработок, ... организации Самостоятельное изучение новых технологий и инструментов в области инженерии данных Требования ...

Приглашаем в нашу дружную команду - Pre-sale инженера по системам резервного копирования и восстановления ... данных. ... клиентов; Сбор и анализ отзывов клиентов, корректировка предложений и решений на основе полученных данных ...