data engineer

Добавь резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

КИОН – онлайн-кинотеатр, который предлагает более 150 телеканалов, тысячи фильмов, сериалов, мультфильмов и документальных проектов. Флагманское направление платформы – оригинальный контент. Отдел платформенных данных занимается внедрением lakehouse нового поколения, в котором разделяют compute от storage. Есть текущий проект с DWH в виде Greenplum и Hadoop, который планируется перевести в поддержку.

• Разрабатывать и рефакторить ETL/ELT пайплайны на pyspark
• Разрабатывать и поддерживать OLAP движки Starrocks/Clickhouse
• Поддерживать текущие пайплайны на Greenplum и Hadoop
• Выполнять миграцию с HDFS на S3
• Оптимизировать spark-приложения

• Опыт работы с Python от 3 лет
• Глубокое знание SQL и опыт работы с большими данными
• Опыт работы с Apache Airflow
• Опыт проектирования и разработки ETL/ELT процессов
• Опыт работы с колоночными БД (ClickHouse)
• Знание принципов построения Data Warehouse и Data Lake
• Понимание разницы между OLTP/OLAP системами
• Уверенная работа с linux и git
• Понимание процессов ci/cd

• Оклад + годовой бонус
• Программа ДМС с первого месяца – 100% покрытие расходов в частных клиниках, включая стоматологию, страховка близких со скидкой 50%, страховка в поездках за границу и страхование жизни
• Очное и онлайн-обучение в корпоративном университете, у внешних провайдеров, обмен опытом в сообществах, доступ к онлайн-библиотеке
• Оплачиваемые выходные на значимые события
• Материальная помощь в сложных ситуациях
• Корпоративная мобильная связь + интернет, подписка МТС Premium
• Предложения от партнёров для путешествий, развлечений и спорта
• Участие в волонтерских программах
• Внутренняя спортивная программа «В движении»