Data Engineer

Команда разрабатывает продукт для сбора, хранения и анализа данных о пользовательском окружении с целью выявления проблем пользователей и своевременного реагирования на них. Аналитика проводится на основе собираемой в режиме реального времени информации по рабочему окружению и данных различных внутренних продуктов.

• Поддерживать, развивать и оптимизировать кластеры ClickHouse;
• Проектировать и реализовывать ETL-процессы с использованием Kafka и Bash;
• Мониторить, анализировать и повышать производительность баз данных;
• Разрабатывать и поддерживать скрипты автоматизации на Bash;
• Участвовать в проектировании архитектуры хранения и обработки данных.

• Опыт проектирования таблиц в ClickHouse, понимание движков (MergeTree, ReplicatedMergeTree, Kafka), оптимизация хранения данных, партиционирование и шардирование;
• Настройка Kafka и разработка пайплайнов обработки данных;
• Уверенное владение Bash для автоматизации рутинных задач;
• Опыт работы в консоли Linux;
• Навыки работы с генеративными AI-моделями, опыт создания AI-агентов;
• Будет плюсом опыт работы с другими СУБД (PostgreSQL, MySQL), знание Python или других скриптовых языков, опыт работы с CI/CD, контейнеризацией (Docker, Kubernetes), системами мониторинга (Prometheus, Grafana, Zabbix) и логирования.

• Офис в Москве, БЦ "Даниловский форт";
• Гибкий график начала рабочего дня;
• Бесплатный спортзал;
• ДМС с первого дня работы;
• Обучение и сертификация за счет компании;
• Выстроенные процессы адаптации, оценки и система роста;
• Наставник на период адаптации и корпоративные мероприятия.