ML-аналитик в Яндекс Образование

Яндекс Образование создаёт образовательные продукты для школьников, родителей и учителей, а также инструменты для образовательного сообщества. Оно разрабатывает технологичные решения, включая ИИ-инструменты, которые помогают детям осваивать IT-навыки и учиться эффективнее, а взрослым — сопровождать этот процесс.

• Разрабатывать инструменты оценки качества моделей
• Выстраивать систему оценки моделей на разных классах задач, адаптировать открытые бенчмарки, разрабатывать собственные и организовывать разметку данных с помощью внешних исполнителей
• Анализировать качество моделей и решений конкурентов
• Проектировать и внедрять метрики для оценки технологий и сравнения моделей в реальных сценариях использования
• Создавать качественные сигналы для обучения вместе с экспертами-разметчиками
• Ускорять и масштабировать разметку с помощью LLM
• Отслеживать и анализировать новые бенчмарки, наборы данных и подходы к сбору данных
• Выбирать перспективные идеи и внедрять их в практику команды

• Уверенно работать с Python и SQL, знать основные аналитические библиотеки
• Понимать основы статистики и применять их на практике
• Уметь проектировать процессы разметки для удалённых исполнителей
• Понимать, как оценивать сложные агентные ML-пайплайны
• Быть самостоятельным, внимательным к деталям и доводить задачи до результата
• Будет плюсом: опыт работы с Толокой или другими краудсорсинговыми платформами, выстраивания процессов разметки с внешними исполнителями и управления командой ML-аналитиков

• Компенсация от 100М токенов для экспериментов и оптимизации рутины
• Доступ к передовым моделям для ежедневной работы
• Расширенная медицинская страховка с первого месяца работы
• Плановая и неотложная помощь за рубежом, страхование от несчастных случаев и лечение критических заболеваний
• Врачи в клиниках по ДМС, онлайн-консультации с психологами и психотерапия в офисах с соответствующим кабинетом
• Ежегодные медицинские обследования и вакцинация по ДМС
• 30 Оплачиваемых дней больничного в году с сохранением полной зарплаты
• Плановая стоматология, профессиональная чистка и экстренная помощь за рубежом
• После года работы ДМС покрывает коррекцию зрения и хирургическое лечение косоглазия
• Кабинеты терапевтов есть во всех крупных офисах Яндекса
• Оплата ведения беременности и родов для сотрудниц и жён сотрудников со стажем более двух лет
• Страховка для детей и супругов по системе 80/20: работодатель оплачивает 80% стоимости ДМС