devops engineer

Описания нет

• Поддерживать и развивать конвейеры CI/CD для инфраструктуры данных;
• Организовывать и сопровождать кластер Kubernetes, включая развёртывания и Helm-чарты;
• Настраивать и поддерживать инфраструктуру для DWH, Lakehouse и Streamhouse;
• Поддерживать и администрировать вычислительные движки Trino, Flink, StarRocks и Spark;
• Работать с системами хранения Apache Iceberg, Paimon, Parquet, ORC и S3 (MinIO);
• Настраивать процессы CDC для сбора и синхронизации данных;
• Мониторить сервисы, настраивать логирование и устранять инциденты;
• Автоматизировать рутинные задачи управления экспериментальными окружениями на более чем 20 машинах;
• Взаимодействовать с инженерами по данным и аналитиками для обеспечения стабильности и прозрачности процессов.

• Опыт работы с Kubernetes, развёртываниями и Helm;
• Опыт работы с системами CI/CD;
• Опыт администрирования и настройки вычислительных фреймворков Spark, Flink или аналогов;
• Опыт работы с хранилищами данных Iceberg, Paimon или аналогами;
• Опыт работы с S3-совместимыми системами хранения MinIO или AWS S3;
• Навыки автоматизации с Bash, Python, Groovy и другими инструментами;
• Знание Git и опыт работы с GitLab, Jira и Confluence;
• Понимание принципов DWH и потоковой обработки данных;
• Английский на уровне чтения технической документации;
• Будет плюсом опыт настройки CDC, знание Terraform или Ansible, опыт работы с Trino и StarRocks, опыт построения архитектур Lakehouse и Streamhouse, знание особенностей работы со стеком Big Data.

• Работа над проектом длительностью более 6 месяцев;
• Условий в вакансии нет.