Описания нет
вчера
data engineer витрин данных
ориентир по рынку
вакансия
зп не указана
в среднем
222 397 ₽
мэтч
Загрузи резюме, чтобы видеть мэтчи с вакансиейЗагрузи резюме, чтобы видеть мэтч с вакой
подготовься к отклику
ai-инструментыЧтобы адаптировать резюме под вакансию или составить сопроводительное письмо, загрузи резюме
описание
задачи
- Анализировать существующие решения и витрины данных
- Мигрировать витрины данных со стека Hadoop на стек Apache Iceberg, Spark 3.5 и Apache Airflow
- Реализовывать недостающие реплики для витрин данных
- Перерабатывать существующие решения на целевом стеке
- Строить и развивать витрины данных, участвовать в тестировании
- Наполнять и актуализировать техническую документацию
требования
- Уверенно знать SQL и Python
- Иметь опыт работы с Apache Spark
- Иметь практический опыт работы с хранилищами данных на базе Hadoop или S3
- Знать Apache Iceberg и иметь опыт работы с ним
- Иметь опыт использования Apache Airflow
- Понимать форматы хранения данных, в том числе Parquet
- Иметь опыт работы с Git, CI/CD, Jira и Confluence
- Иметь базовые знания Kafka
условия
- Расширенный полис ДМС со стоматологией
- Гибкий график
- Обучение и сертификация
- Клуб английского языка
- Геймифицированная программа лояльности
навыки
Международная ИТ-компания специализируется на заказной разработке программного обеспечения, ИТ-консалтинге и внедрении инновационных решений в области искусственного интеллекта и машинного обучения для крупного бизнеса
Подробнее о компании →Если просят выйти из iCloud, прислать код из SMS, запустить или установить что-то, перевести деньги — не соглашайся: это мошенничество.
