AQA-engineer (auto)

Мы команда ФинСтрой AI, которая разрабатывает ИИ-решения для прогнозирования стоимости объектов строительства СБЕРа. Наша задача сократить срок подготовки оценки объекта строительства и повысить её точность. Ищем AQA-инженера, который будет тестировать поведение агента, интеграции и пользовательские сценарии.

• формировать и поддерживать тестовую модель продукта совместно с аналитиками и разработчиками
• формировать тестовые корзины для детерминированных и недетерминированных сценариев агента: входные данные, источники, ожидаемый результат и критерии проверки
• формировать нагрузочный профиль агента
• описывать модель поведения агента в основных, альтернативных и негативных сценариях
• разработка автотестов по тест-кейсам
• проводить функциональное, интеграционное, регрессионное и исследовательское тестирование web-интерфейса, backend и API
• проверять корректность расчётов, полноту и непротиворечивость результата, актуальность данных, наличие обоснований и ссылок на источники
• разбирать логи и трайсы работы агента, локализовывать ошибки на уровне модели, интеграции, данных или тестового стенда
• тестировать сценарии с отсутствующими или противоречивыми данными, ошибками API, тайм-аутами и недоступностью внешних сервисов
• заводить и сопровождать дефекты, поддерживать тестовую документацию и участвовать в подготовке релизов.

• опыт коммерческого тестирования web и backend-систем от трех лет
• опыт автоматизации тестирования на Python, Java или TypeScript с использованием Pytest, Requests, Playwright, Selenium или аналогов
• знание теории тестирования и практический опыт применения техник тест-дизайна
• опыт тестирования ИИ-решений, RAG-систем или продуктов с использованием LLM
• опыт тестирования REST API и интеграций
• навыки работы с JSON, Postman или curl, DevTools и логами
• понимание клиент-серверной архитектуры и базовых принципов работы микросервисов
• умение составлять тест-кейсы, чек-листы и понятные отчёты о дефектах
• готовность тестировать сценарии с вариативным результатом, выполнять повторные прогоны и сравнивать результаты с заданными критериями
• умение уточнять требования и взаимодействовать с аналитиками, разработчиками и бизнес-экспертами
• Будет плюсом: опыт проведения нагрузочного тестирования; опыт создания eval-наборов или автоматизированных проверок результатов работы ИИ-систем; опыт тестирования тулов и MCP-серверов: контрактов, схем, авторизации, тайм-аутов, повторных вызовов и обработки ошибок; опыт тестирования финансовых, аналитических, банковских или строительных систем

• ежегодный пересмотр зарплаты, годовой бонус
• корпоративный спортзал и зоны отдыха
• более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
• расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
• ипотека для сотрудников выгоднее до 4%
• бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
• вознаграждение за рекомендацию друзей в команду Сбера
• корпоративная пенсионная программа.