дата инженер для ML-продуктов
ориентир по рынку
вакансия
зп не указана
в среднем
206 201 ₽
мэтч
Загрузи резюме, чтобы видеть мэтчи с вакансией
Загрузить
Чтобы адаптировать резюме под вакансию или составить сопроводительное письмо, загрузи резюме
загрузить резюме
описание
Ozon Банк развивает финансовые технологии для людей и бизнеса и самостоятельно реализует ключевые системы: процессинг, учётное ядро и переводы.
задачи
Разрабатывать пакетные конвейеры на Spark/PySpark под управлением Airflow Готовить витрины и наборы данных для обучения, скоринга и мониторинга моделей Организовывать слои и партиционирование данных в HDFS, контролировать хранение и квоты Оптимизировать производительность и ресурсоёмкость задач Spark Проектировать загрузку и хранение данных в ClickHouse, оптимизировать запросы и структуру таблиц Обеспечивать надёжность конвейеров: проводить проверки качества данных, настраивать мониторинг и оповещения, разбирать инциденты
требования
Опыт разработки промышленных конвейеров данных Уверенное знание Spark/PySpark, HDFS, Python и SQL Опыт работы с Airflow и ClickHouse Понимание распределённых вычислений, партиционирования и оптимизации ETL-процессов Будет плюсом: опыт работы с Kafka, Feature Store и данными для машинного обучения, скоринга или антифрода
Популярная российская платформа для онлайн-шопинга. Продает товары от электроники до одежды, предлагает доставку, скидки и бонусные программы. Поддерживает продавцов через маркетплейс и логистические решения. Удобно для покупок и бизнеса.
Подробнее о компании →
Если просят выйти из iCloud, прислать код из SMS, запустить или установить что-то, перевести деньги — не соглашайся: это мошенничество.
Про зарплаты
Анонимные данные по зарплатам и грейдам. Можно сверить вилку с рынком.
Посмотреть зарплаты