аналитик данных больших языковых моделей

Команда отвечает за качество ключевых технологий Яндекса: распознавание и синтез речи, перевод, генерацию изображений, большие языковые и мультимодальные модели. Она создаёт метрики качества, собирает и проверяет данные для улучшения моделей и выстраивает процессы разметки с участием экспертов.

• Развивать навыки моделей — от агентности и умения писать код до решения и объяснения школьных задач и работы с файлами на сотни страниц;
• Придумывать и внедрять сложные метрики для объективной оценки уровня технологий;
• Выстраивать процессы сбора данных для fine-tuning и RL;
• Работать с экспертами-разметчиками над созданием сложных сигналов;
• Ускорять разметку с помощью LLM;
• Анализировать новые бенчмарки, датасеты и подходы к сбору данных;
• Выделять наиболее полезные исследования и внедрять их в работу.

• Опыт от 3 лет;
• Знание YQL, Python, Nirvana и Toloka;
• Знание статистики;
• Самостоятельность и аккуратность.

• Расширенная медицинская страховка с первого месяца работы;
• Оплачиваемый больничный — 30 дней в году;
• ДМС покрывает плановые и экстренные медицинские услуги, стоматологию, чекапы, вакцинацию и помощь за рубежом;
• Онлайн-консультации с психологами и психотерапия в офисах, где есть кабинет психотерапевта;
• После года работы ДМС покрывает коррекцию зрения и хирургическое лечение косоглазия;
• Оплата ведения беременности и родов для сотрудниц и жён сотрудников, которые работают в компании более двух лет;
• ДМС для детей и супругов по системе 80/20.