дата инженер

Финам строит собственную агентскую платформу корпоративного уровня — аналог открытых агентских систем. Платформа объединяет производительное ядро, LLM и машинное обучение для работы с аналитическими запросами пользователей.

• Проектировать и развивать корпоративное хранилище данных на ClickHouse, включая архитектуру, модель данных, выбор движков таблиц, партиционирование, шардирование и материализованные представления;
• Строить и поддерживать ETL/ELT-пайплайны загрузки данных из внешних систем-источников;
• Разрабатывать стандарты данных и единые требования к структуре, форматам, типам и качеству данных;
• Создавать и вести каталог данных и словарь данных с описанием структуры и бизнес-смысла наборов данных;
• Контролировать качество данных с помощью валидации, тестов и мониторинга;
• Оптимизировать производительность хранения и аналитических запросов;
• Проектировать и разрабатывать агентский слой LLM-агентов поверх данных хранилища для обработки произвольных аналитических запросов пользователей;
• Интегрировать LLM, разрабатывать инструменты и функции для агентов;
• Организовывать семантический слой для корректной работы агентов с данными;
• Настраивать процессы оценки и улучшения качества ответов агентов;
• Настраивать разграничение прав доступа к данным средствами СУБД, включая RBAC и политики на уровне строк и столбцов в ClickHouse;
• Документировать архитектуру и принятые решения.

• Опыт в инженерии данных от 4 лет;
• Глубокий опыт работы с ClickHouse или сильный опыт с другими аналитическими и колоночными СУБД;
• Опыт проектирования хранилища данных с нуля;
• Владение подходами к моделированию данных, включая Kimball, Data Vault и широкие таблицы;
• Уверенное знание SQL и навыки оптимизации запросов;
• Опыт построения ETL/ELT-пайплайнов с Airflow, dbt или аналогами;
• Знание Python или другого языка для инженерии данных и интеграции с LLM;
• Практический опыт работы с LLM и построения агентов;
• Опыт работы с агентскими фреймворками, вызовом функций и инструментов, RAG и text-to-SQL;
• Понимание подходов к управлению качеством данных, управлению данными и стандартам данных;
• Опыт настройки разграничения прав доступа в СУБД;
• Будет плюсом опыт работы с семантическим или метриковым слоем, LLMOps и оценкой качества агентов, инструментами каталогизации данных, большими объёмами данных и высоконагруженными системами.

• Официальное трудоустройство и полный пакет социальных льгот;
• ДМС;
• Компенсация фитнеса, обучения и путешествий;
• Скидки и бонусы от партнёров;
• Специальные условия и тарифы на продукты «Финама»;
• Стабильная заработная плата и социальные гарантии;
• Возможность профессионального роста, обучения и развития;
• Участие в конференциях и мастер-классах за счёт компании;
• Участие в проектах цифровой трансформации финансового сектора;
• Два офисных дня в неделю;
• Офис в центре Москвы с зоной отдыха на крыше, кофе-поинтами и тренажёрным залом;
• Корпоративные мероприятия, сообщества по интересам и участие в креативных проектах.