ml инженер агентских систем

Команда развивает Alice AI LLM — технологию, которая лежит в основе разных продуктов Яндекса. Она специализируется на агентских способностях модели: использовании инструментов, написании текстов, рассуждении и самостоятельном выполнении задач до результата. Одно из направлений — long-horizon tasks, сложные многошаговые задачи, которые агент может выполнять автономно несколько часов, сохраняя состояние и восстанавливаясь после ошибок.

• Развивать внешние и внутренние бенчмарки, включая Terminal и SkillsBench;
• Разработать стратегию и план развития системы оценки long-horizon-возможностей моделей;
• Сформулировать требования к эталонным решениям и автоматическим верификаторам;
• Анализировать результаты и траектории работы агентов;
• Выявлять системные ограничения и возможности для роста;
• Устранять основные классы ошибок вместе с командами разработки и обучения;
• Добиваться измеримого улучшения моделей;
• Проектировать пайплайны для генерации, разметки и проверки обучающих данных;
• Нанимать и развивать сотрудников;
• Выстраивать процессы и распределять зоны ответственности в команде.

• Опыт руководства технической командой или работы ведущим специалистом;
• Опыт работы в сфере NLP;
• Активное использование инструментов для вайб-кодинга и понимание разницы между Claude и Codex;
• Уверенное владение SQL и Python;
• Навыки анализа данных и построения эффективных процессов их обработки;
• Знание теории вероятностей и математической статистики;
• Понимание развития LLM и устройства агентских систем;
• Самостоятельность и готовность работать с задачами без готовых решений;
• Будет плюсом опыт работы с метриками и бенчмарками в NLP, построения или оценки агентских систем, свободное чтение статей и документации на английском языке.

• Расширенная медицинская страховка с первого месяца работы;
• Оплачиваемые 30 дней больничного в году;
• ДМС покрывает плановую и экстренную помощь за рубежом, лечение критических заболеваний и страхование от несчастных случаев;
• Онлайн-консультации с психологами и психотерапия в офисах, где есть кабинет психотерапевта;
• Ежегодные чекапы и вакцинация по ДМС;
• Стоматология и экстренная помощь за рубежом;
• После года работы ДМС покрывает коррекцию зрения и хирургическое лечение косоглазия;
• Кабинеты врачей-терапевтов в крупных офисах;
• Оплата ведения беременности и родов для сотрудниц и жён сотрудников, которые работают в компании более двух лет;
• ДМС для детей и супругов по системе 80/20.