ml инженер мультимодальных агентов

Команда Alice AI VLM Agents превращает мультимодальную модель в агента, который планирует шаги, вызывает инструменты, работает с внешними системами и решает визуальные задачи в продуктивных и непродуктивных средах. Исследовательские идеи быстро внедряются в реальные модели и пользовательские сценарии Яндекса.

• Учить модель вызывать OCR, парсеры, браузер, поиск и внутренние API, выбирать подходящие инструменты, передавать аргументы и обрабатывать ошибки и некорректные результаты;
• Развивать агентское планирование и многошаговое поведение модели, включая декомпозицию задач, удержание контекста, восстановление после ошибок и работу с длинными траекториями;
• Проектировать продуктивные и непродуктивные агентские среды, включая песочницы, симуляторы, бенчмарки, обучение, офлайн-оценку и реальные продуктовые сценарии;
• Повышать надёжность и предсказуемость агента в непродуктивных средах и под нагрузкой в продуктивной среде.

• Хорошо знать ML и уверенно ориентироваться в современных LLM или VLM;
• Иметь практический опыт в CV, NLP или мультимодальном обучении;
• Знать Reinforcement Learning и понимать, где применимы подходы RL;
• Понимать, как строятся агенты и tool calling поверх LLM или VLM, или хотеть развиваться в этом направлении;
• Уметь формулировать гипотезы, ставить аккуратные эксперименты и делать выводы по результатам;
• Будет плюсом опыт работы с агентами, автономными конвейерами или RL в интерактивных средах, обучение больших моделей или крупномасштабных ML-систем, знакомство с tool calling, агентскими конвейерами или обучением моделей работе с внешними инструментами, понимание ограничений современных VLM и интерес к трендам в области агентов и моделей, дополненных инструментами.

• Расширенная медицинская страховка с первого месяца работы;
• Оплачиваются 30 дней больничного в году;
• ДМС покрывает плановые и экстренные медицинские услуги за рубежом, стоматологию, чекапы и вакцинацию;
• ДМС включает онлайн-консультации с психологами и психотерапию в офисах, где есть кабинет психотерапевта;
• После года работы ДМС покрывает коррекцию зрения и хирургическое лечение косоглазия;
• Оплачиваются ведение беременности и роды для сотрудниц и жён сотрудников, которые работают в компании более двух лет;
• ДМС для детей и супругов по системе 80/20: компания оплачивает 80% стоимости.