Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.
Data engineer
генерация резюме
сопроводительное письмо
описание
Описания нет
задачи
- Проектировать и разрабатывать пакетные и потоковые конвейеры данных;
- Строить и поддерживать загрузку данных из внутренних и внешних источников;
- Разрабатывать и развивать модели озера данных / хранилища данных;
- Оптимизировать производительность заданий обработки данных на базе Spark;
- Разрабатывать и поддерживать модели dbt и контракты данных;
- Внедрять и поддерживать мониторинг, наблюдаемость и проверки качества данных;
- Работать с потоковыми конвейерами на базе Kafka;
- Сотрудничать с командами аналитики, маркетинга, платформы и бэкенда.
требования
- Отличные навыки SQL и Python;
- Реальный опыт построения конвейеров ETL / ELT;
- Практика с Spark / PySpark, особенно в потоковых сценариях;
- Понимание распределённых систем обработки и хранения данных;
- Опыт работы с архитектурами озера данных / хранилища данных;
- Практика с Delta tables, Parquet и S3;
- Опыт с инструментами оркестрации вроде Airflow;
- Опыт работы с Kafka и потоковыми конвейерами;
- Опыт поддержки и улучшения продакшн-конвейеров данных;
- Опыт с наблюдаемостью, мониторингом и практиками качества данных;
- Будет плюсом опыт с dbt.
условия
- Медицинская страховка или компенсация, включая стоматологию, для тебя и семьи в офисах;
- Платный отпуск и больничные;
- Спортивные занятия: йога, футбол, волейбол в офисах;
- Пакет для переезда в офисы;
- Курсы английского онлайн, греческого и армянского в Кипре/Армении;
- Участие в геймджемах, хакатонах, конференциях.
навыки