описание
Развивается голосовой ассистент с навыками от прогноза погоды и поиска до генеративного ИИ и внешних интеграций. В основе продукта — Go-бэкенд, ASR/TTS-сервисы и LLM, обеспечивающие диалог с пользователем.
задачи
- Проверять корректность распознавания запросов, слотов и сущностей, неоднозначных формулировок и нестандартных сценариев
- Проверять полный цикл взаимодействия пользователя с ассистентом — от голосового запроса до итогового ответа
- Проверять стабильность и корректность работы внешних ASR, TTS, LLM и других сервисов
- Разрабатывать сценарные автотесты на Go или Python, формировать регрессионный набор и интегрировать его в CI
- Отслеживать качество работы продукта в продакшене, выявлять деградации и предотвращать регрессии
- Изучать сложные диалоговые сценарии, искать ошибки NLU и проверять поведение ассистента в нестандартных ситуациях
- Формализовывать требования совместно с аналитиками и продактами, определять критерии приёмки и выявлять потенциальные проблемы на этапе проектирования
- Самостоятельно находить слабые места продукта, предлагать улучшения и выстраивать процессы качества
требования
- Опыт работы в QA от 5 лет
- Понимание принципов работы голосовых ассистентов, NLU, интентов, слотов и сущностей
- Опыт тестирования систем с недетерминированными ответами
- Сильный опыт E2E-тестирования распределённых систем
- Понимание REST, gRPC, очередей и межсервисных взаимодействий
- Практический опыт написания автотестов на Go или Python
- Умение самостоятельно проектировать тестовые сценарии и выстраивать стратегию тестирования
- Готовность работать с неполными требованиями, задавать вопросы и влиять на качество продукта
- Высокая самостоятельность, инициативность и системное мышление
- Будет плюсом: опыт тестирования голосовых ассистентов и диалоговых систем, работа с Kibana, Grafana, Prometheus и Sentry, понимание тестирования stateful-диалогов и управления контекстом, знание Docker и Kubernetes, опыт построения мониторинга качества внешних сервисов и автоматизации регрессионного тестирования
условия
- Условий в вакансии нет