Ruby Labs
сегодня

ai engineer

выше рынка на 75,0%
вакансия 514 600 ₽
в среднем 294 114 ₽
мэтч
Добавь резюме в профиле, чтобы видеть % мэтча с вакансией

сопроводительное письмо

Добавь резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

описание

Таймзона CET ±4 часа. Вне РФ и РБ

Ruby Labs создаёт и управляет инновационными потребительскими продуктами в сферах здоровья, образования и развлечений. Команды компании продвигают будущее продуктов, ориентированных на потребителя.

задачи

  • Разрабатывать сложные динамические шаблоны промптов с условной логикой и повторным использованием контекста для повышения качества генерации.
  • Внедрять схемы структурированных выходов (JSON mode, function calling, Zod/JSON schemas) для предсказуемых результатов.
  • Строить пайплайны оценки и использовать Langfuse для сбора отзывов и скоринга ответов в реальном времени.
  • Проводить глубокий дебаг сложных цепочек LLM с помощью трассировок Langfuse для оптимизации затрат, задержек и использования контекстного окна.
  • Запускать A/B-тесты моделей через OpenRouter и анализировать результаты по количественным метрикам.
  • Принимать решения о деплое промптов и моделей на основе бенчмарков и трассировок.
  • Разрабатывать системы скоринга для анализа цепочки "Проблема → Решение" и выявления галлюцинаций или ошибок логики.
  • Регулярно переоценивать производительность моделей и проводить файн-тюнинг при необходимости.

требования

  • Глубокие знания Node.js и Next.js для создания надёжных сервисов и обработки данных от LLM.
  • Опыт создания динамических промптов, зависящих от входных переменных и инъекций контекста.
  • Опыт работы с OpenRouter: unified API, управление лимитами и выбор моделей по стоимости.
  • Понимание observability LLM: настройка трассировки, тестовые датасеты, системы скоринга в Langfuse или аналогах.
  • Опыт методик оценки: фреймворки вроде RAGAS или кастомные "LLM-as-a-judge".
  • Аналитический подход: превращать логи генераций в бизнес-метрики и техинсайты.
  • Фокус на итеративном улучшении через петли обратной связи.
  • Будет плюсом опыт файн-тюнинга моделей под домен или JSON compliance, RAG-архитектуры (индексация, ретрив, ранжирование) и базовые знания Python для data science скриптов или библиотек оценки.

условия

  • Неограниченный оплачиваемый отпуск.
  • Оплачиваемые национальные праздники.
  • Выдают MacBook.
  • Гибкий договор независимого подрядчика с налоговыми плюсами и свободой локации.

прозрачные зарплаты в IT

Анонимные данные по зарплатам и грейдам

Посмотреть
График динамики зарплат
Откликнуться Добавить в отклики