разработчик greenplum платформы данных

Компания занимается молекулярно-генетическими исследованиями в онкологии, микробиологии, иммунологии и инфекционных заболеваниях, а также разработкой лекарств и тест-систем на стыке медицины, генетики и IT.

• Проектировать масштабируемую, надёжную и производительную архитектуру единой платформы данных;
• Разрабатывать и сопровождать техническую дорожную карту платформы, синхронизированную с бизнес-целями и потребностями исследователей;
• Анализировать и обеспечивать масштабируемость, надёжность и производительность ключевых компонентов;
• Проектировать и внедрять системы оркестрации многоэтапных пайплайнов обработки данных;
• Разрабатывать ключевые компоненты платформы: панель управления, оркестраторы, агенты, API и SDK;
• Создавать и развивать инструменты самообслуживания для автономного запуска, мониторинга и контроля пайплайнов дата-инженерами и аналитиками;
• Обеспечивать мультитенантность, разграничение доступа и аудит действий пользователей;
• Обеспечивать целостность, надёжность и безопасность данных на всех этапах обработки;
• Оптимизировать использование вычислительных ресурсов и хранилищ;
• Проводить планирование ёмкости и тестирование производительности, выявлять и устранять узкие места;
• Развивать направление наблюдаемости: мониторинг, APM и оповещения;
• Формировать и внедрять технические стандарты платформенной команды;
• Систематизировать процессы разработки, унифицировать технологический стек и инструментарий;
• Систематизировать и вести техническую документацию по платформенным сервисам и архитектурным решениям.

• Опыт проектирования горизонтально масштабируемых и отказоустойчивых систем с интенсивной обработкой данных на bare-metal, виртуальных машинах и/или в Kubernetes;
• Понимание архитектурных компромиссов и умение выбирать решения под конкретные нагрузки;
• Уверенное владение Python;
• Опыт разработки бэкенд-сервисов и API с использованием FastAPI;
• Опыт работы с оркестраторами пайплайнов: Airflow, Dagster и другими;
• Понимание HTC/HPC-систем;
• Опыт работы с распределёнными системами хранения: Ceph, CephFS и S3-совместимыми хранилищами;
• Понимание объектного и файлового хранения для нагрузок с интенсивной обработкой данных;
• Опыт построения CI/CD-пайплайнов в GitLab;
• Способность принимать и аргументировать системные архитектурные решения с учётом надёжности, производительности и стоимости;
• Опыт формирования технических стандартов, включая архитектурные принципы, code review, инженерную документацию и практики эксплуатации;
• Будет плюсом опыт разработки на Go, глубокое понимание Kubernetes, опыт работы со Slurm, Singularity/Apptainer и опыт в биотехнологиях или биоинформатике.

• Оформление по ТК РФ;
• Заработная плата обсуждается индивидуально в зависимости от навыков;
• Работа в быстрорастущей стабильной организации;
• Команда профессионалов на стыке IT и науки;
• Современное оборудование для рабочих мест;
• Возможность профессионального роста и обучения;
• График 5/2.