.svg)
.svg)
Добавьте резюме в профиль, чтобы сгенерировать временное CV под эту вакансию
Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.
сегодня
qa engineer (auto)
выше рынка на 76,8%
вакансия
256 000 ₽
в среднем
144 763 ₽
мэтч
Добавь резюме в профиле, чтобы видеть % мэтча с вакансией
генерация резюме
сопроводительное письмо
Добавь резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории
описание
Нужно проживать вне РФ и РБ, а также работать по времени Вашингтона (PT) с 7:00 до 16:00.
Студия разработки с более чем 10-летним опытом создания веб- и мобильных приложений, no-code решений и интеллектуальных AI-агентов для клиентов по всему миру.
задачи
- Тестировать и оценивать работу AI-агентов;
- Разрабатывать и проводить тесты для проверки корректности, устойчивости и стабильности поведения агентов;
- Подготавливать тест-кейсы и сценарии функционального и нефункционального тестирования;
- Анализировать поведение агентов при нестандартных входных данных, выявлять логические ошибки и проблемы в промптах;
- Взаимодействовать с разработчиками и промпт-инженерами для улучшения моделей и тестовых пайплайнов;
- Поддерживать и развивать автоматизацию тестирования и процессы контроля качества внутри AI-команды;
- Вести техническую документацию и описывать лучшие практики.
требования
- Опыт работы в тестировании от 2 лет;
- Практический опыт тестирования AI-агентов или чат-ботов;
- Понимание принципов работы AI-агентов, LLM-систем и промпт-инженерии;
- Опыт работы с инструментами оценки качества моделей;
- Опыт автоматизированного тестирования;
- Уверенное владение Python на уровне написания тестов и скриптов;
- Навыки работы с Git и системами отслеживания ошибок;
- Разговорный английский язык уровня B2;
- Будет плюсом опыт работы с LangChain, vapi, Synthflow или другими инструментами создания AI-агентов, опыт анализа выходов LLM по метрикам качества, понимание процессов CI/CD и инструментов мониторинга, участие в построении тестовой архитектуры для AI-систем.
условия
- Полностью удалённый формат работы;
- Работа в команде разработчиков, ML-инженеров и AI-специалистов;
- Возможность профессионального роста в тестировании LLM- и AI-систем;
- Оплата от 20 USD в час.
навыки
