ml инженер банковских продуктов

Дирекция мониторинга Agile Сбера создаёт дашборд для руководителей. Она собирает данные по процессам в банке, анализирует их и предоставляет информацию для принятия решений.

• Разрабатывать и оптимизировать диалоговые сценарии, сложные запросы и примеры ответов для взаимодействия с LLM;
• Оценивать качество ответов моделей, корректировать их, проводить фактчекинг и проверять этичность и достоверность;
• Формировать, систематизировать и размечать обучающие данные для улучшения качества моделей;
• Внедрять и оптимизировать RAG-системы, включая интеграцию векторных баз данных Pinecone и FAISS;
• Проводить A/B-тестирование промптов, моделей и подходов к генерации;
• Разрабатывать и поддерживать базу знаний для LLM, включая актуализацию контента;
• Обеспечивать мониторинг работы AI-систем и выявлять проблемные зоны на разных этапах работы системы;
• Писать автотесты для проверки стабильности и качества систем на каждом этапе;
• Создавать инструкции и рекомендации по использованию AI в различных сценариях;
• Отслеживать тренды в области AI и оценивать новые инструменты и технологии.

• Опыт от 1 года в промпт-инжиниринге или разработке AI-агентов;
• Глубокое понимание LLM и опыт работы с их API;
• Умение калибровать параметры генерации: temperature, top-p, guidance и другие;
• Знание методов zero-shot, few-shot и chain-of-thought;
• Навыки программирования на Python, включая pandas и API;
• Базовое владение Git;
• Опыт работы с моделями ChatGPT, Llama, Qwen, DeepSeek и их аналогами;
• Опыт работы с LangChain;
• Знание SQL;
• Опыт работы с ИИ-инструментами;
• Умение структурировать документацию и визуализировать процессы.

• Работа из офиса с возможностью работать удалённо один день в неделю;
• Комфортный современный офис рядом с метро «Кутузовская»;
• Корпоративный спортзал и зоны отдыха;
• Система обучения для профессионального и карьерного развития;
• Программа адаптации и помощь руководителя на старте;
• Расширенный ДМС и льготное страхование для семьи;
• Льготный дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ;
• Подписка Прайм с возможностью использования на трёх близких;
• Вознаграждение за рекомендацию друзей в команду Сбера;
• Корпоративная пенсионная программа.