Hadoop инженер (Трайб Data Office)
По договоренности
- Войковская
- Сокол
- Аэропорт
Кого мы ищем? Мы в Банке строим ядро data-инфраструктуры — платформу Data Lake. Это основа для хранения, обработки и анализа больших данных, которая станет ядром всех data-driven процессов в Банке: от загрузки «сырых» данных до запуска ML моделей. Сейчас мы ищем DevOps-инженера с опытом в Hadoop-администрировании, который поможет нам вывести платформу на новый уровень: развернуть кластер, обеспечить отказоустойчивость, автоматизировать процессы и выстроить надежную, гибкую и масштабируемую инфраструктуру.
Чем предстоит заниматься:
- Разворачивать и настраивать Hadoop-дистрибутив (на выделенном железе и в DR-сценариях);
- Поддерживать работоспособность платформы, анализировать и устранять инциденты;
- Настраивать репликацию между площадками (Prod ↔ DR);
- Помогать продуктовым командам, data-инженерам и аналитикам использовать Data Lake;
- Внедрять мониторинг и алерты по ключевым компонентам (HDFS, YARN, Hive, Spark, Kerberos, Ranger и др.);
- Проводить эксперименты с новыми open-source решениями;
- Автоматизировать процессы и настраивать CI/CD пайплайны.
Что мы ждём:
- Администрирование Hadoop кластеров;
- Администрирование OC Linux (RHEL, CentOS);
- Знание CI/CD практик;
- Навыки автоматизации с помощью Python/Bash;
- Опыт эксплуатации систем мониторинга (Prometheus, Grafana, Zabbix, ELK).
Адрес: Россия, Москва, улица Клары Цеткин, 4А
Опубликована 2 дня назад
Похожие вакансии
В связи с усилением команды ищем DevOps-инженера. Требования: Опыт администрирования ОС семейства Linux (Ubuntu, ОСнова); Понимание основ работы сетей; Знание ключевых сервисов: вычисления (EC2), хранение (S3), сети (VPC), IAM, базы данных (RDS) и т.
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
8 часов назад
Проектная организация ООО "МИТ" (дороги, мосты, тоннели) в поисках Инженера по разработке ПОС/ Инженер СВСиУ. Чем придется заниматься: Выполнение поручений руководителя; Разработка раздела ПОС с 0 до сдачи на экспертизу; Общение с экспертами по защит...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
7 часов назад
Oxygen Data Centers and Clouds – крупная быстроразвивающаяся IT-компания. Мы – это центр ИТ-компетенций с собственной сетью дата-центров, кластеров в России и за рубежом. Наша команда – высококвалифицированные инженеры и разработчики с богатым опытом...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
7 часов назад
DevOps-инженер (part-time) Привет! Мы Affilyx — IT-продуктовая компания, создающая цифровые B2C-сервисы по подписной модели. Наши продукты — это web-сервисы, которые решают конкретные задачи пользователей в России, СНГ и за рубежом. Мы создаем удобны...
- Можно удаленно
- Частичная занятость
- Опыт от 3 лет
- Москва
8 часов назад
Обязанности: Администрирование ОС Linux, а также системного ПО; Внесением изменений в конфигурацию оборудования и системного ПО, выполнение плановых и регламентных работ; Участие в восстановлении работоспособности систем после аварий; Диагностика и у...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
7 часов назад
BSS - это ведущий разработчик в мире финансовых продуктов и сервисов, онлайн-коммуникаций и пользовательского опыта. Входит в ТОП 20 крупнейших финтех-компаний РФ (Smart Ranking, 2024), имеет более 700 сотрудников в штате и четыре направления деятель...
- Можно удаленно
- Полный день
- Опыт от 3 лет
- Москва
2 дня назад