automation qa

ИТ B2C — крупнейшая экосистема Сбербанка, объединяющая свыше 8000 специалистов из 18 городов России, создающая удобные и защищённые розничные банковские сервисы. Команда ИИ-сценариев и комплексных решений проектирует и внедряет инновационные AI-решения для оптимизации взаимодействия банка с клиентами, используя самые современные технологии обработки естественного языка и машинного обучения.

• Разрабатывать и поддерживать тесты для ИИ-агентов (чат-агенты, автономные ассистенты, multi-agent системы)
• Писать специализированных «агентов-проверяющих» на Python — программных ассистентов, которые тестируют поведение, логику и безопасность других ИИ-агентов
• Проектировать сценарии для проверки корректности, согласованности, устойчивости к манипуляциям и соблюдению инструкций
• Анализировать логи взаимодействий, выявлять edge-кейсы и системные риски
• Участвовать в формировании стратегии обеспечения качества для генеративных ИИ-систем

• Опыт автоматизированного тестирования на Python (pytest, requests, asyncio и др.)
• Уверенное владение основами тестирования: жизненный цикл ПО, виды тестирования (функциональное, регрессионное, интеграционное и др.), методологии (Agile/Scrum), метрики качества
• Навыки построения и актуализации тестовых моделей (например, на основе требований, user stories или архитектурных диаграмм) для выявления ключевых сценариев и рисков
• Понимание принципов работы LLM и ИИ-агентов (промпты, инструменты, память, цепочки рассуждений)
• Умение проектировать сложные тестовые сценарии для нетривиальных систем
• Опыт валидации поведения систем без чёткого «правильного ответа» (open-ended output)
• Будет плюсом знание и практическое применение подхода LLM-as-a-Judge для оценки качества ответов агентов, опыт использования LLM в качестве инструмента анализа или оценки, участие в тестировании RAG-систем, multi-agent окружений или агентов с внешними инструментами

• Работа в современном и комфортном офисе рядом с метро Кутузовская
• Расширенный ДМС и льготное страхование для семьи
• Уникальная система обучения Сбера для профессионального и карьерного развития
• Выгодная ипотека для сотрудников выгоднее
• Бесплатная подписка СберПрайм+, скидки на продукты компании-партнёров
• Вознаграждение за рекомендацию друзей в команду Сбера
• Корпоративная пенсионная программа