Data Engineer

ориентир по рынку

вакансия зп не указана

в среднем 206 794 ₽

мэтч

Загрузи резюме, чтобы видеть мэтчи с вакансией

генерация резюме под вакансию

Загрузи резюме в профиль, чтобы сгенерировать временное CV под эту вакансию

сопроводительное письмо

Загрузи резюме в профиль, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

описание

Команда занимается развитием корпоративного хранилища данных, исследованием и внедрением новых инструментов, написанием библиотек для использования другими командами, разработкой нестандартных ETL потоков и оптимизацией сложных потоков данных.

задачи

Реализовывать ETL в Hadoop с помощью Airflow;
Работать с различными источниками данных: Oracle, MS SQL, API личных кабинетов, микросервисы;
Настраивать батч и стримы с помощью PySpark и Kafka;
Подготавливать витрины для анализа с использованием Hive, Spark и SQL.

требования

Уверенное владение Python;
Опыт использования экосистемы Hadoop: HDFS, Apache AirFlow, Hive, Kafka, Spark;
Знание SQL;
Опыт работы с реляционными базами данных, включая Oracle.

условия

Гибкий график работы;
Участие в проекте кафетерия льгот (ДМС, спорт, мобильная связь, обучение);
Полугодовые премии;
Корпоративные скидки до 30% на товары Спортмастер, Ostin, Funday, Demix;
Внутреннее и внешнее обучение, конференции;
Доступ к сервису персонализированных скидок и привилегий BestBenefits;
Предоставление необходимой техники.

навыки

python sql hadoop hdfs apache airflow hive kafka spark etl oracle ms sql pyspark

Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.

Добавить в трекер

Откликнуться В трекер