data engineer

Добавь резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

Команда разрабатывает масштабируемые конвейеры данных и оптимизирует рабочие процессы. Вам нужно будет проектировать, разрабатывать и поддерживать масштабируемые конвейеры данных на Airflow, создавать и оптимизировать таблицы в Athena для эффективных запросов и экономии затрат, писать и управлять SQL-трансформациями в DBT с созданием переиспользуемых моделей, оптимизировать рабочие процессы данных по производительности, надёжности и стоимости, автоматизировать настройку инфраструктуры через Terraform, обеспечивать целостность данных мониторингом, валидацией и обработкой ошибок, сотрудничать с командами аналитики, BI и инженерии для понимания нужд в данных и предоставления решений, а также оперативно устранять проблемы в конвейерах данных.

• Опыт от 1 года в data engineering с фокусом на ELT-процессы
• Хорошо знаете Python, SQL, моделирование данных и оптимизацию производительности
• Опыт работы с Airflow DAGs для оркестрации рабочих процессов
• Опыт работы с DBT для трансформаций данных и модульного моделирования
• Понимаете AWS S3, Athena и архитектуры data lake
• Будет плюсом знание Terraform для автоматизации инфраструктуры, сильные аналитические навыки, навыки решения проблем и внимание к деталям

• Полная удалёнка