ml инженер для reasoning-моделей

Команда развивает способности к рассуждениям семейства моделей Alice AI LLM. Она стремится создать единую модель, объединяющую рассуждения, использование внешних функций и поисковые возможности сервисов, а также улучшить качество ответов на повседневные запросы пользователей. Для этого команда экспериментирует с RLVR, RLHF, многостадийным выравниванием, генеративными и основанными на правилах моделями вознаграждения.

• Развивать базовые способности Alice AI LLM к рассуждениям;
• Проводить эксперименты по улучшению полезности, логичности и структуры модели;
• Повышать качество цепочек рассуждений и усиливать паттерны backtracking и верификации;
• Создавать новые этапы выравнивания и системы наград для объединения сигналов из разных областей;
• Проводить исследования с новыми моделями вознаграждения, этапами обучения и дистилляцией в рамках единой модели;
• Экспериментировать с on-policy и асинхронными RL-алгоритмами;
• Тестировать методы стабилизации обучения Dense- и MoE-архитектур.

• Отлично разбираться в NLP и классическом ML;
• Уметь программировать на Python;
• Понимать устройство современных LLM;
• Иметь опыт решения прикладных задач с LLM или релевантный исследовательский опыт;
• Иметь опыт от 3 лет.

• Расширенная медицинская страховка с первого месяца работы;
• Оплачиваемый больничный до 30 дней в году;
• ДМС покрывает плановые и экстренные медицинские услуги, стоматологию, чекапы и вакцинацию;
• Онлайн-консультации с психологами и психотерапия в офисах, где есть кабинет психотерапевта;
• После года работы ДМС покрывает коррекцию зрения и хирургическое лечение косоглазия;
• Оплачиваются ведение беременности и роды для сотрудниц и жён сотрудников, работающих более двух лет;
• ДМС для детей и супругов по системе 80/20.