описание
Описания нет
задачи
- Проверять формулировки интентов, слоты и краевые случаи: прерывания, переспросы и неоднозначности
- Тестировать полный диалог от пользовательского запроса до финального ответа системы
- Проверять стабильность внешних сервисов ASR, TTS, LLM и других компонентов голосового конвейера
- Писать сценарные автотесты на Go или Python для регресса интентов и запускать их в CI
- Исследовать сложные диалоговые сценарии и искать ошибки в логике NLU и недетерминированных ответах
- Мониторить продакшен и анализировать инциденты
- Помогать продакт-менеджеру формализовать критерии приёмки интентов и сквозных сценариев при размытых или отсутствующих исходных данных
требования
- Опыт работы в QA от 5 лет
- Отличное понимание NLU: интентов, слотов и сущностей; умение проверять их на недетерминированных ответах моделей
- Опыт сквозного тестирования распределённых систем с взаимодействием через REST, gRPC и очереди сообщений
- Практический опыт написания автотестов на Go или Python
- Умение работать без чёткого технического задания, задавать вопросы разработчикам и продакт-менеджеру и находить ошибки в логике на этапе дизайна
- Высокая проактивность и самостоятельность
- Аналитическое мышление и умение превращать размытые идеи в проверяемые критерии
- Коммуникабельность и умение аргументированно отстаивать необходимость доработок
- Будет плюсом: опыт тестирования голосовых ассистентов или диалоговых систем, навыки работы с Kibana, Grafana, Prometheus или Sentry, понимание тестирования диалоговых контекстов и stateful-сценариев, знание Docker и Kubernetes
условия
- Ставка до 195 000 руб. на руки в месяц
- Локация/гражданство: РФ
- Рассматриваются кандидаты с релевантностью опыта от 85% (аутстаффинговая позиция)