Инженер сопровождения

SberData строит централизованное хранилище данных, объем которого уже превышает 100 ПБ. Это продуктово-ориентированная инженерная команда с функциями развития выделенных технологических направлений, отражающих новый подход Сбербанка к данным и к применению AI. SDP Hadoop - это полноценный дистрибутив на базе Apache Hadoop, адаптированный для внутреннего использования, предназначенный для хранения и обработки слабоструктурированных и неструктурированных данных. Стек технологий: Linux (RHEL), Hadoop (Hive, YARN, Oozie) RH IDM IPA (LDAP, IDM, CA, DNS, HBAC, SUDO), PostgreSQL + Patroni, Apache Ozone, Kafka, HAProxy, NGinx, Grafana + Prometheus, Ansible, Jenkins, Vault (hashicorp), Git, Bash, Python.

Задачи

• установка, настройка, обновление кластеров SDP Hadoop и связанной инфраструктуры


• участие в проектировании продукта SDP Hadoop со стороны сопровождения: написание ТЗ, описание и воспроизведение Дефектов


• автоматизация рутинных операций для повышения производительности и надежности систем (самостоятельно и с привлечением смежных команд, выставление ТЗ на контрагентов)


• анализ и оперативное устранение нештатных ситуаций, отказов приложений, а также исследование корневых причин их возникновения


• поддержка и совершенствование процессов CI/CD, релизного процесса, обеспечивая эффективную разработку и доставку


• создание эксплуатационной документации для сопровождаемых систем


• организация работ, взаимодействие со смежными командами, исправления выявленных недостатков.

Требования

• глубокие знания в troubleshooting'е и администрировании linux-систем, уверенное владение командами ОС семейства Linux


• написание различных SQL запросов, понимание что такое DML, DDL, DCL, TCL, знание принципов работы реляционных БД


• понимание работы стека TCP/IP


• опыт эксплуатации CI/CD систем (Jenkins/Github/TeamCity/etc) и с системами мониторинга (Prometheus, Zabbix)


• понимание технологий интеграции между системами (форматы сообщений xml, json, менеджеры очередей Kafka, RabbitMQ, IBM MQ, ActiveMQ)


• опыт автоматизации на скриптовых языках (shell/perl/python/etc)


• опыт работы с централизованными системами по управлению идентификацией пользователей (RH IDM IPA, Active Directory), понимание принципов работы Kerberos, LDAP


• знание ITSM, ITIL и опыт написания технической документации и технических заданий.

Будет плюсом

• опыт в администрировании и troubleshooting'e Hadoop, а именно Hive, YARN, Oozie, Zookeper, Hue, Ambari, HBASE, Spark, HDFS, Druid, Flume, Solr, Ranger


• английский язык на уровне чтения технической документации


• техническое образование.

Условия

• офисный формат работы по адресу г Москва, наб Новоданиловская (БЦ Даниловский Форт, ДФ), 10


• график: 5/2


• ежегодный пересмотр зарплаты и годовая премия


• более 400 образовательных программ СберУниверситета для профессионального и карьерного развития


• программа адаптации и помощь руководителя на старте


• расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа


• гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ


• подписка Прайм с возможностью совместного использования на трёх близких


• вознаграждение за рекомендацию друзей в команду Сбера.