ml разработчик генеративных моделей

Команда улучшает генеративные модели Alice AI LLM для пользователей Алисы. Она развивает естественное и человечное общение модели, понимание контекста и настроения собеседника, адаптацию к его стилю, персонализацию ответов и работу с техниками alignment, включая RL и мультиаспектные reward-функции.

• Исследовать подходы RL и бороться с reward hacking;
• Находить паттерны шаблонных ответов, создавать диагностики и срезы, улучшать reward-модели и методы обучения;
• Исследовать человечность как отдельный аспект качества и учить модель адаптироваться к собеседнику;
• Находить релевантные воспоминания в истории диалогов;
• Определять, когда использовать воспоминания в ответах и какую информацию сохранять в долгосрочной памяти;
• Исследовать очистку и интерпретацию пользовательского сигнала;
• Превращать пользовательский сигнал в устойчивый обучающий reward;
• Проверять, что модель становится полезнее и человечнее, а не эксплуатирует поверхностные закономерности обратной связи;
• Учить модели раскладывать сложные задачи на шаги;
• Учить модели выбирать подходящий инструмент, формировать вызовы, анализировать результаты и восстанавливаться после ошибок;
• Определять, когда модели нужен инструмент, а когда лучше ответить самостоятельно.

• Опыт работы с NLP и LLM;
• Понимание устройства современных языковых моделей;
• Глубокий интерес к прикладным ML-исследованиям;
• Будет плюсом опыт работы с Reinforcement Learning (RL), reward-моделями, LLM-агентами и tool calling.

• Расширенная медицинская страховка с первого месяца работы;
• Оплачиваемые больничные — 30 дней в году с сохранением полной зарплаты;
• ДМС покрывает плановые и экстренные медицинские услуги за рубежом, стоматологию, чекапы, вакцинацию и лечение критических заболеваний;
• Онлайн-консультации с психологами и психотерапия в офисах, где есть соответствующий кабинет;
• После года работы ДМС покрывает коррекцию зрения и хирургическое лечение косоглазия;
• Оплачивается ведение беременности и роды для сотрудниц и жён сотрудников, которые работают в компании более двух лет;
• ДМС для детей и супругов по системе 80/20: компания оплачивает 80% стоимости.