сегодня

Data engineer

ориентир по рынку
вакансия зп не указана
в среднем 217 390 ₽
Загрузи резюме, чтобы видеть мэтчи с вакансиейЗагрузи резюме, чтобы видеть мэтч с вакой

подготовься к отклику

ai-инструменты

Чтобы адаптировать резюме под вакансию или составить сопроводительное письмо, загрузи резюме

Рекламный баннер: ОБЩЕСТВО С ОГРАНИЧЕННОЙ ОТВЕТСТВЕННОСТЬЮ "ЦЕНТР НАЦИОНАЛЬНЫХ ИНТЕЛЛЕКТУАЛЬНЫХ СИСТЕМ"
О рекламодателе
ОБЩЕСТВО С ОГРАНИЧЕННОЙ ОТВЕТСТВЕННОСТЬЮ "ЦЕНТР НАЦИОНАЛЬНЫХ ИНТЕЛЛЕКТУАЛЬНЫХ СИСТЕМ"
ИНН: 9704271170

описание

Привет! Это команда Подготовка офлайн-факторов ранжирования. Мы занимаемся сбором, агрегацией и подготовкой данных о событиях, пользователях и товарах, которые в дальнейшем используются для аналитики и ранжирования в товарном поиске Ozon. Наш стек Python, PySpark, Spark, Clickhouse, Kafka, Airflow, Grafana.

задачи

  • Создавать новые и развивать существующие пайплайны обработки данных для команд направления поиска.
  • Оптимизировать процессы поставки данных и сокращать время на их подготовку.
  • Участвовать в создании платформы для внедрения новых процессов подготовки данных и мигрировать существующие.
  • Подготовка витрин и датасетов для команд, аналитики, DS и ML.
  • Оптимизация Spark-задач, SQL-запросов и процессов поставки данных.
  • Настройка регулярных процессов подготовки витрин данных и контроль их качества.
  • Разбор инцидентов в процессах подготовки витрин и повышение их надежности.

требования

  • Опыт разработки пайплайнов обработки данных от 2х лет.
  • Уверенное владение Python и SQL.
  • Опыт работы с PySpark/Spark или готовность быстро погрузиться.
  • Опыт работы с Airflow или другими системами оркестрации обработки данных.
  • Умение разбираться в существующем коде и улучшать его качество.
  • Внимательность к надежности, производительности и мониторингу.
  • Будет плюсом: Промышленный опыт работы с PySpark/Spark; Опыт работы с ClickHouse, Kafka; Опыт оптимизации Spark-задач и SQL-запросов; Опыт программирования на Java; Опыт настройки мониторинга в Grafana

условия

  • Условий в вакансии нет

Популярная российская платформа для онлайн-шопинга. Продает товары от электроники до одежды, предлагает доставку, скидки и бонусные программы. Поддерживает продавцов через маркетплейс и логистические решения. Удобно для покупок и бизнеса.

Подробнее о компании →

Если просят выйти из iCloud, прислать код из SMS, запустить или установить что-то, перевести деньги — не соглашайся: это мошенничество.

Спроси Хайрика про вакансию

Сверит с твоим резюме, подскажет вилку и вопросы на собесе.

Если просят выйти из iCloud, прислать код из SMS, запустить или установить что-то, перевести деньги — не соглашайся: это мошенничество.