Data engineer

грейд
senior
формат
удалённо
страна
Россия
опубликована
вчера

описание

Описания нет

задачи

  • Разработка и оптимизация архитектуры хранилищ данных, проектирование слоев данных;
  • Создание, поддержка и оптимизация высоконагруженных ETL-процессов;
  • Интеграция данных из внутренних/внешних источников (API, файловые хранилища, БД);
  • Работа с Big Data и стримингом;
  • Коммуникация с бизнес-аналитиками и формализация требований, дата-инженерами и архитекторами;
  • Проведение код ревью и шеринг экспертизы с коллегами (проведение митапов, техническая консультация).

требования

  • Опыт в разработке и поддержке хранилищ данных от 5 лет;
  • Отличные знания SQL, опыт оптимизации сложных запросов и работы с большими объёмами данных;
  • Опыт проектирования и разработки ETL-процессов;
  • Опыт разработки real-time и near real-time pipeline’ов обработки/загрузки данных;
  • Глубокие знания и практический опыт работы с Hadoop (HDFS, Hive, Spark);
  • Опыт работы с Airflow и Docker;
  • Опыт работы с GIT;
  • Уверенные знания Python.

условия

  • Условий в вакансии нет

навыки

компания

Сервис для бронирования отелей, хостелов и апартаментов в 220 странах. Более 2,7 млн вариантов размещения, удобный поиск по ценам и фильтрам. Поддержка 24/7 и бонусные программы для путешественников.

Подробнее о компании →

похожие вакансии

статьи для разработчиков