Мы делаем Voice Mode в GigaChat — голосового AI-агента для сложных пользовательских сценариев. Хотим, чтобы общение с ним было максимально похоже на разговор с человеком: с естественной речью, длинным диалогом и нормальной реакцией на перебивания. Отдельно работаем над надежной работой с внешними инструментами, низкой задержкой и эмпатией.
DL-разработчик голосовых AI-агентов
подготовься к отклику
ai-инструментыЧтобы адаптировать резюме под вакансию или составить сопроводительное письмо, загрузи резюме
описание
задачи
- Разрабатывать архитектуру взаимодействия voice-слоя и agent harness: перебивания, barge-in, turn-taking, асинхронные скиллы
- Экспериментировать с обучением LLM: от SFT до RL, адаптировать модели под конкретные домены и улучшать работу с функциями и скиллами
- Строить систему оценки качества голосовых агентов: от WER, latency и GCR до tau-like бенчмарков
- Улучшать работу системы на реальном трафике: работать с длинными диалогами, ошибками распознавания, телефонным каналом, шумом, акцентами, перебиваниями и спонтанной речью
требования
- Имеете практический опыт распределенного обучения больших моделей и понимаете, как оно устроено под капотом
- Строили пайплайны для оценки качества и сбора данных для генеративных моделей
- Умеете решать продуктовые ML-задачи полного цикла: от сбора разметки до внедрения в продакшн
- Будет плюсом: Применяли RL-методы для обучения LLM на практике; Занимались обучением мультимодальных LLM; Работали над улучшением ASR, TTS или других audio-компонентов; Понимаете, как устроены сложные harness-системы, и писали нетривиальные скиллы для собственных разработок или реальных продуктов
условия
- крупнейшее DS&AI community — более 600 DS-специалистов банка
- дайджест о самых последних разработках в области DS&AI и отчеты с крупнейших конференций мира
- возможность быть соавтором НИРов и статей для международных конференций
- возможность выбрать удобный формат работы: гибрид или офис
- ежегодный пересмотр зарплаты, годовая премия
- корпоративный спортзал и зоны отдыха
- более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
- расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
- ипотека выгоднее до 7% для каждого сотрудника
- бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров
- вознаграждение за рекомендацию друзей в команду Сбера.
навыки
Крупнейший российский банк и экосистема. Предоставляет банковские услуги: кредиты, вклады, карты, ипотека. Развивает сервисы: доставка, здоровье, развлечения, облачные технологии и ИИ. Удобно для финансов и повседневных задач.
Подробнее о компании →Если просят выйти из iCloud, прислать код из SMS, запустить или установить что-то, перевести деньги — не соглашайся: это мошенничество.