Data Engineer (Такси)
По договоренности
WB Такси развивает экосистему сервисов для клиентов, водителей и операторов поддержки. Мы уже запустили сервис в Беларуси и масштабируемся на рынок РФ и страны СНГ.
Наш стек технологий: ClickHouse, Kafka, Airflow, PostgreSQL, MySQL, Tableau, GitLab, Grafana, Minio.
Вам предстоит:
- Прорабатывать архитектуру процессов загрузки хранилища и сопутствующей инфраструктуры;
- разрабатывать новые и дорабатывать существующие фреймворки для работы с потоками данных в хранилище;
- проводить анализ и составлять ТЗ по всем типам задач;
- документировать новые процессы и вносить описания в существующие;
- проводить мониторинг стабильной работы потоков и качества данных в хранилище.
Вы нам подходите, если:
- Имеете промышленный опыт программирования на Python;
- имеете опыт работы с MPP-системами;
- понимаете методологии построения хранилищ данных;
- уверенно владеете SQL;
- владеете навыками работы с Git.
Опубликована 7 часов назад
Похожие вакансии
Вакансии быстро закрываются — подпишитесь на наш канал в MAX сейчас, чтобы видеть их первыми.
Подписаться в MAXдо 210 000 ₽
В связи с активным развитием проектов в компании открыта вакансия Data Engineer/Data аналитика. ... Будет большим плюсом: Понимание Data Governance (знакомство с DAMA, подходами к управлению качеством) ...
- Полный день
- Опыт от 3 лет
- Москва
7 часов назад
Java-подобного языка - Опыт работы с MPP системами (GreenPlum / Hadoop / StarRocks) - Опыт работы с DBT (Data ...
- Полный день
- Опыт от 3 лет
- Москва
7 часов назад
... работы с Power BI (другими BI-платформами); Интерес к современным подходам работы с данными (DataOps, Data ... Quality, Data Governance); Интерес к AI/LLM и сценариям использования данных (RAG, data layer для моделей ... системы); Участие в оптимизации производительности обработки данных; Участие в развитии архитектуры data-платформы ...
- Полный день
- Опыт от 3 лет
- Москва
8 часов назад
... конвейеры обработки данных, используя стек технологий Hadoop, Apache Spark и другие инструменты Big Data ... Требования Опыт работы в роли Data Engineer (или аналогичной) от 2 лет; Уверенное владение SQL: написание ... или Big Data и участие в профессиональных сообществах, конференциях, open-source проектах.
- Полный день
- Опыт от 3 лет
- Москва
8 часов назад
Мы строим Data Lake House платформу с современным стеком: S3, Trino, Apache Iceberg, DBT, Airflow, Kafka ... реализация в тандеме с архитектором физического уровня архитектуры данных в DWH для всех слоев (raw data ... layer, core data layer, data mart layer); реализация ETL-пайплайнов передачи данных из различных внутренних ...
- Полный день
- Опыт от 3 лет
- Москва
7 часов назад
Вакансия в подборках
Похожие вакансии
до 210 000 ₽