NDA
вчера

devops engineer

выше рынка на 10,8%
вакансия 255 500 ₽
в среднем 230 650 ₽
мэтч
Добавь резюме в профиле, чтобы видеть % мэтча с вакансией

сопроводительное письмо

Добавь резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

описание

Команда строит платформу данных с нуля, мигрируя сотни миллионов финансовых записей с legacy на Kubernetes, Spark, Airflow, Trino, Iceberg.

задачи

  • Строить ETL-пайплайны
  • Создавать витрины данных
  • Обеспечивать качество данных
  • Работать с ETL на Spark (PySpark / Spark SQL)
  • Оркестрировать через Airflow DAGs
  • Строить витрины данных на Iceberg tables
  • Оптимизировать запросы в Trino и Spark SQL
  • Контролировать качество: сверка, валидация, мониторинг

требования

  • SQL на уровне (оконные функции, CTE, большие объёмы)
  • Spark + Airflow
  • Python для ETL
  • Будет плюсом Iceberg/Delta Lake и Trino

условия

  • Условий в вакансии нет
LinkedIn Добавить в отклики