Инженер данных

Команда строит корпоративную платформу данных следующего уровня, трансформируя наработки компании в единое стандартизированное решение для работы с данными.

• Разрабатывать с нуля MVP новой платформы данных и инфраструктуры для загрузки и трансформации данных;
• Мигрировать существующие пайплайны с Hadoop и HDFS на новую архитектуру;
• Работать с большими объёмами данных и высоконагруженными Kafka-топиками;
• Строить отказоустойчивые пайплайны обработки и доставки данных;
• Участвовать в архитектурных решениях, внедрять лучшие практики хранения, мониторинга и качества данных;
• Проектировать витрины данных под продуктовую и управленческую аналитику;
• Сопровождать миграцию BI-отчётов на новую платформу.

• Опыт работы от 3 лет на позиции инженера данных или инженера по большим данным;
• Глубокое понимание принципов работы Spark;
• Опыт работы с ClickHouse и умение оптимизировать его производительность;
• Знание основ построения архитектуры данных (хранилища, озера данных, OLAP, ETL/ELT, управление данными);
• Умение проектировать отказоустойчивые пайплайны;
• Владение одним из языков программирования (Python или Scala);
• Уверенное знание SQL;
• Будет плюсом опыт построения платформ данных, работы с высоконагруженной Kafka, знание инструментов мониторинга и контроля качества данных, построения линий происхождения данных и работы с каталогами данных, а также опыт работы с Docker, Kubernetes и CI/CD.

• Аккредитованная IT-компания;
• Полностью «белая» зарплата;
• Дополнительные дни отпуска за стаж работы;
• ДМС, онлайн-консультации терапевта, невролога, психолога и медицинского агента;
• Учебный центр, курсы, тренинги и книги для профессионального развития;
• Помощь с выступлениями на конференциях и публикациями на профильных ресурсах.