ai engineer
генерация резюме под вакансию
сопроводительное письмо
описание
Бизнес-помощник для предпринимателей на платформе СберБизнес предоставляет аналитику, консультации по развитию бизнеса, планирует действия и составляет пошаговые планы, выполняя часть задач за пользователя.
задачи
- Разрабатывать систему метрик для оценки LLM-агентов и промптов;
- Проектировать офлайн- и онлайн-эксперименты для проверки гипотез;
- Создавать синтетические датасеты для оценки;
- Внедрять фреймворки оценки (Ragas, LangSmith, DSPy, GEPA);
- Переводить бизнес-критерии в измеримые метрики;
- Давать чёткий, аргументированный фидбек аналитикам и разработчикам.
требования
- Опыт коммерческой разработки или оценки решений на базе open-source моделей, OpenAI или Anthropic от 1.5 до 2 лет;
- Глубокое понимание техник промптинга (Few-shot, Chain-of-Thought, ReAct) и умение управлять поведением моделей;
- Практический опыт работы с фреймворками оценки качества генеративных систем и отдельных промптов (Ragas, LangSmith, DSPy, GEPA);
- Понимание классических метрик (BLEU, ROUGE, BERTScore, F1-score) и основ математической статистики для оценки достоверности тестов;
- Опыт использования GigaChat, Kandinsky и аналогов в продуктах, навыки создания и использования AI-агентов.
условия
- Ежегодный пересмотр зарплаты, годовая премия;
- Корпоративный спортзал и зоны отдыха;
- Более 400 образовательных программ СберУниверситета;
- Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа;
- Гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ;
- Бесплатная подписка Прайм с возможностью совместного использования на трёх близких.
навыки
Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.