Описания нет
Data engineer в DWH
подготовься к отклику
ai-инструментыЧтобы адаптировать резюме под вакансию или составить сопроводительное письмо, загрузи резюме
описание
задачи
- Разрабатывать и сопровождать ETL/ELT-пайплайны.
- Работать с Apache Airflow: разрабатывать, поддерживать и оптимизировать DAG.
- Проектировать и реализовывать интеграции и потоки данных.
- Работать с DWH (ODS / DDS / ADS) и большими объёмами данных.
- Оптимизировать запросы, пайплайны и процессы обработки данных.
- Анализировать и устранять инциденты, повышать стабильность процессов.
- Участвовать в code review и развитии стандартов разработки.
- Реализовывать и поддерживать проверки качества данных.
- Взаимодействовать с аналитиками, Data Scientists и другими командами.
- Участвовать в развитии Data Platform и технической документации.
- Для Senior — участвовать в архитектурных решениях, развитии инженерных практик и менторинге команды.
требования
- Уверенный SQL и Python.
- Практический опыт работы с Apache Airflow.
- Опыт разработки ETL/ELT-пайплайнов.
- Опыт работы с DWH и понимание архитектуры ODS / DDS / ADS.
- Опыт работы с MPP СУБД, предпочтительно Greenplum.
- Понимание принципов оптимизации запросов и пайплайнов.
- Опыт работы с Git и code review.
- Понимание принципов Data Quality и Data Governance.
- Будет плюсом: Опыт работы с ClickHouse и S3; Понимание Data Vault; Опыт настройки мониторинга и алертинга; Знакомство с каталогами данных, например OpenMetadata; Опыт CI/CD и DevOps-практик
условия
- Условий в вакансии нет
навыки
Если просят выйти из iCloud, прислать код из SMS, запустить или установить что-то, перевести деньги — не соглашайся: это мошенничество.