Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.
data engineer
генерация резюме
сопроводительное письмо
описание
Команда работает над несколькими данными интенсивными проектами для крупных европейских компаний из финансов, энергетики, промышленности и SaaS.
Ключевые направления — создание современных архитектур Data Lake / Lakehouse на базе Microsoft Azure для продвинутой аналитики, BI и машинного обучения, а также разработка end-to-end платформ данных с интеграцией источников, трансформацией и хранением.
задачи
- Проектировать, разрабатывать и поддерживать масштабируемые пайплайны данных (ETL / ELT);
- Интегрировать данные из нескольких внутренних и внешних источников;
- Проектировать и развивать архитектуру платформы данных на Azure;
- Строить и оптимизировать решения data warehouse / lakehouse;
- Работать с Microsoft Data Platform (Fabric, Synapse, ADF);
- Оптимизировать производительность и надёжность систем обработки данных;
- Обрабатывать крупномасштабные датасеты (Big Data);
- Разрабатывать и поддерживать модели данных для аналитических систем;
- Поддерживать команды аналитики и машинного обучения надёжной инфраструктурой данных;
- Участвовать в архитектурных обсуждениях и принятии технических решений.
требования
- 5+ Лет опыта в Data Engineering;
- Отличное владение Python для обработки данных;
- Отличные навыки SQL;
- Практический опыт с пайплайнами ETL / ELT;
- Опыт работы с технологиями Big Data (Spark / PySpark);
- Опыт работы с облачными платформами (Azure обязательно);
- Глубокий практический опыт с Microsoft Data Platform: Azure Data Factory (ADF), Azure Synapse Analytics, Microsoft Fabric;
- Понимание архитектур Data Lake / Data Warehouse / Lakehouse;
- Опыт работы с нативными сервисами Azure в продакшене;
- Знание Git и практик CI/CD;
- Опыт работы в Agile / Scrum командах;
- Сильное аналитическое мышление и умение работать со сложными системами данных;
- Английский B2+ (уверенное общение с техническими и нетехническими командами);
- Будет плюсом опыт с Databricks, Snowflake, dbt, Airflow, Data Vault modeling, стриминговыми пайплайнами, Unity Catalog, Power BI в экосистеме данных, SAP-источниками и end-to-end платформами данных.
условия
- Условий в вакансии нет
навыки