Middle QA Engineer (AI Agent Testing)

ИТ B2C — самая крупная экосистема в Сбере. Нас более 8000 человек в 18 городах России. Мы занимаемся разработкой и развитием розничных решений, помогая сделать сервисы Банка доступнее, безопаснее и удобнее.

Ждем именно тебя!

Задача команды - разработать и внедрить AI агентов в Управление развития искусственного интеллекта блока "Управление благосостоянием". Наше преимущество команды в инновационном подходе использования AI решений в исследовательских задачах.

Предметная область

Финансовые продукты:

- Персональное финансовое управление (портфели, цели, накопления)

- Инвестиции (ПИФы, пенсионные продукты), страхование (ИНСЖ), депозитарные услуги

- Страхование (ОСАГО, КАСКО, др.)

Цифровые интерфейсы:

- Чат-интерфейс Сбербанк Онлайн (цифровой помощник для клиентов)

- Нативный чат GigaChat с интеграцией финансовых сценариев

Обязанности

· Разработка и выполнение тест-кейсов для проверки функциональности, логики и поведения AI-агентов

· Тестирование диалоговых сценариев и интеграций с внешними системами

· Проведение регрессионного, интеграционного и end-to-end тестирования

· Проведение ПСИ

· Валидация качества ответов агента: релевантность, точность, безопасность

· Создание автоматизированных тестов для API, UI и бизнес-логики агента

· Проверка тестовых датасетов

· Анализ результатов проведения тестирования и подготовка сводного отчёта о тестировании релиза

· Анализ логов, метрик и ошибок для выявления паттернов сбоев

· Подготовка тестовых данных

· Тестирование обучающих датасетов / валидация данных для обучения моделей

· Документирование багов, тест-планов и отчетов о качестве в Jira/Confluence

· Участие в код-ревью тестовых скриптов и спецификаций

· Работа в команде по методологии Agile

Требования

• Опыт автоматизированного тестирования от 2 лет
• Понимание принципов работы AI-агентов и LLM или сильная мотивация погрузиться в эту область

· Знает и умеет использовать инструменты разработки для работы (IDEA/PyCharm, Junit, REST-Assured, Allure)

· Умеете дорабатывать тестовые фреймворки и их расширения

· Умеете использовать SbringBoot (в случае Java)

· Умееет разрабатывать на Python/Java (уметь и писать читаемый код и поддерживаемый код)

· Умеете работать с версионированием кода и дистрибутивами

· Базовое понимание DevOps-практик и желание развиваться в этом направлении

· Инструменты разработчика в браузере (знать как посмотреть, какие запросы отправляются на сервер)

· Знаете основные паттерны проектирования ПО и умеет применять их на практике;

· Знаете SQL на любом уровне

· Умеете работать с инструментами для тестирования серверного API (Postman, SOAPUI и т.д)

· Опыт работы с системами контроля версий (Git) и CI/CD

· Опыт работы с Jira, Confluence

· Опыт тестирования мобильных приложений

· Опыт тестирование сложных систем с интеграционным взаимодействием

· Внимание к деталям

· Умение работать с большим объемом информации

· Критическое мышление, умение работать с неопределённостью, коммуникация с ML-командой

Условия

• Полное соблюдение ТК РФ, льготные условия по программам страхования, кредитования для сотрудников Банка;)
• График 5/2, офис на м. Кутузовская;
• Режим работы - гибрид
• Достойный уровень вознаграждения (оклад + внушительная годовая премия);
• ДМС с первого дня работы и льготная мед. страховка для близких родственников;
• Социальная поддержка сотрудников;
• Возможность стать частью команды, реализующей программы цифровой трансформации банка - на основе передового опыта и инновационных идей;
• Широкие возможности для профессионального развития: корпоративный университет и множество онлайн-программ обучения. Корпоративное обучение за счет компании;
• Бесплатная подписка СберПрайм+, многочисленные скидки и бонусы от партнеров: СберМаркет, МегаМаркет, Самокат, Еаптека и др.;
• Корпоративная пенсионная программа