Data Engineer
сопроводительное письмо
описание
Клиент является сторонним администратором медицинских льгот, предоставляющим самострахуемые планы медицинского, стоматологического обслуживания, FSA и HRA для работодателей. Компания предлагает комплексную онлайн-платформу, которая позволяет работодателям, брокерам, поставщикам услуг и участникам управлять медицинскими претензиями и оплачивать их эффективно и безопасно. Проект направлен на централизацию и оптимизацию данных в организации путем сбора информации из нескольких внутренних репозиториев, обеспечения целостности, безопасности и согласованности данных, а также предоставления высококачественных данных поставщикам с минимальной задержкой.
задачи
- Проектировать, разрабатывать и поддерживать конвейеры данных с использованием Azure Data Factory и Microsoft Fabric.
- Внедрять и оптимизировать процессы ETL/ELT для загрузки и преобразования данных.
- Работать с Azure SQL и Fabric Warehouse для построения масштабируемых моделей данных.
- Разрабатывать и оптимизировать сложные SQL-запросы, хранимые процедуры и преобразования.
- Обеспечивать качество, согласованность и целостность данных в рамках платформы данных.
- Интегрировать данные из различных внутренних и внешних систем.
- Контролировать и устранять неполадки в конвейерах данных и рабочих процессах данных.
- Участвовать в улучшении архитектуры платформы данных.
- Разрабатывать и поддерживать отчеты и дашборды в Power BI.
- Поддерживать бизнес-команды в анализе данных и подготовке отчетов.
- Обеспечивать надежные и производительные источники данных для отчетности.
- Помогать в определении метрик, KPI и наборов данных для отчетности.
- Работать с Azure Portal для управления ресурсами платформы данных.
- Поддерживать процессы CI/CD с использованием Azure DevOps.
- Помогать в развертывании конвейеров и настройке сред.
- Контролировать состояние платформы и устранять неполадки в платформе данных.
требования
- 3+ лет опыта работы в качестве Data Engineer.
- Опыт работы с Azure Data Factory и построением конвейеров ETL/ELT.
- Опыт работы с Azure SQL / SQL Server и написанием сложных SQL-запросов.
- Опыт работы с Microsoft Fabric, включая Data Pipelines, Lakehouse, Warehouse и Python Notebooks.
- Опыт работы с Python для преобразования данных, автоматизации и разработки в ноутбуках.
- Понимание архитектур хранилищ данных и моделирования данных.
- Опыт работы с Power BI для построения и поддержки аналитических отчетов.
- Знание Azure DevOps и процессов CI/CD.
- Базовый опыт работы с Azure Portal и облачными ресурсами.
- Понимание процессов интеграции и преобразования данных.
- Способность анализировать потоки данных и оптимизировать конвейеры данных.
- Способность работать в команде в рамках кросс-функциональной команды.
- Будет плюсом опыт работы с Azure Portal и облачными ресурсами.
условия
- Глобальный пакет льгот включает техническое и нетехническое обучение для профессионального и личного роста.
- Внутренние конференции и митапы для обучения у отраслевых экспертов.
- Поддержка и наставничество от опытного сотрудника для профессионального роста и развития.
- Внутренний инкубатор стартапов.
- Медицинская страховка.
- Курсы английского языка.
- Спортивные мероприятия для продвижения здорового образа жизни.
- Гибкие варианты работы, включая удаленную и гибридную.
- Программа рефералов для привлечения новых талантов.
- Программа годовщин работы и дополнительные дни отпуска.
навыки