Data Engineer

Загрузи резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

Компания создаёт будущее, доступное каждому, используя современный стек технологий. Основная деятельность связана с разработкой и поддержкой IT-решений для телекоммуникационной сферы.

Вам нужно будет заниматься миграцией интеграций корпоративного хранилища данных между разными платформами Hadoop. Вы будете рефакторить интеграции в экосистеме Hadoop, переходя с Hive на Spark SQL, а также улучшать ETL-процессы в среде Hadoop.

• Имеете высшее техническое образование
• Имеете опыт работы в IT от 3 лет
• Имеете опыт проектирования и разработки хранилищ данных и ETL-процессов
• Понимаете глубоко архитектуру Hadoop (HDFS, MapReduce) и умеете настраивать параметры сессий
• Имеете опыт использования технологий Apache Spark, Apache Iceberg, Apache Ozone
• Уверенно владеете языком Python, включая библиотеки Pandas, NumPy, PySpark API
• Имеете опыт использования Apache AirFlow, а также опыт работы с Trino или Amazon S3 (Будет плюсом)

• Компенсация мобильной связи и мобильного интернета МегаФона
• Обучение и развитие в МегаАкадемии и мобильном приложении МегаФон Драйв
• Маркетплейс льгот и сервисов Mega4you с акциями от партнёров компании
• Добровольное медицинское страхование, включая стоматологию
• Страхование жизни и страхование от несчастных случаев (24/7), страхование выезда за рубеж
• Возможность собрать индивидуальный пакет бенефитов (спорт, здоровье, путешествия, транспорт, питание и другое)