ML разработчик

Компания разрабатывает Chrome-расширение с использованием искусственного интеллекта, которое превращает ручные сценарии тестирования в готовый код для репозитория. Команда небольшая, работает быстро и без лишней бюрократии. Вам нужно будет отвечать за эксперименты, конвейер оценки и метрики для агента генерации кода, а также улучшать метрики, чтобы они соответствовали ценности для пользователя, и создавать системы для генерации более качественных тестов

• Отлично знаете Python, LangGraph, LangFuse и PydanticAI (в процессе экспериментов)
• Имеете опыт создания и вывода в продакшен как минимум одной значимой функции на базе LLM, ведя её от идеи до пользователей
• Разрабатывали и создавали конвейеры оценки для ML-систем, определяя метрики, которые измеряют реальную ценность для пользователя, и используете их для улучшения
• Ваши инженерные навыки выходят за рамки моделей и ноутбуков; имеете практический опыт написания кода на Python продакшен-качества для конвейеров данных, бэкендов или внутренних инструментов
• Имеете опыт работы в стартапе или быстро меняющейся команде не менее одного года
• Будет плюсом, если имеете опыт создания LLM-агентов с использованием tool-calling, планирования или многошагового рассуждения, опыт работы с бенчмарками генерации кода вроде SWE-bench или HumanEval, опыт работы с фреймворками автоматизации UI, такими как Selenium или Playwright, а также опыт в задачах статического анализа программ, например, парсинга кода и работы с AST

• Работа в небольшой команде с реальными пользователями и без бюрократии
• Процессы настроены на быструю поставку ценности
• Финансовая стабильность, так как компания поддерживается JetBrains и не зависит от внешнего венчурного финансирования
• Работа над практическими мультиагентными LLM-системами для веб-тестирования в сфере с большими возможностями для роста
• Свобода делать лучшую работу