data engineer

Международная компания в сфере финансовых услуг разрабатывает масштабируемые решения для обработки данных, используя современные архитектуры Lakehouse, облачные технологии и распределенные системы.

• Проектировать и внедрять масштабируемые решения для обработки данных с использованием Databricks;
• Разрабатывать и оптимизировать сквозные конвейеры данных на Python и PySpark;
• Сотрудничать с архитекторами решений для внедрения лучших практик в инженерии данных;
• Обеспечивать качество, безопасность, масштабируемость и производительность данных в облачных средах;
• Управлять существующими решениями, включая оптимизацию, устранение неполадок и постоянное улучшение;
• Предоставлять техническое руководство, наставничество и поддержку другим инженерам данных;
• Поддерживать архитектурные решения и участвовать в формировании долгосрочной стратегии платформы;
• Участвовать в проверке кода, технических обсуждениях и обмене знаниями;
• Работать в гибких командах с использованием процессов непрерывной интеграции и доставки.

• Опыт работы в инженерии данных от 8–9 лет;
• Уверенное владение Databricks;
• Продвинутые знания Python и PySpark;
• Опыт проектирования масштабируемых конвейеров данных и распределенных систем обработки;
• Глубокое понимание облачных платформ Azure, AWS или GCP;
• Опыт оптимизации данных, настройки производительности и мониторинга;
• Знание практик безопасности и управления данными;
• Опыт работы в гибких средах разработки;
• Навыки самостоятельной работы и лидерства в технических инициативах;
• Свободное владение английским языком (уровень B2);
• Будет плюсом опыт работы с Delta Lake и архитектурой Lakehouse, знания CI/CD и инфраструктуры как кода, опыт наставничества, знакомство с потоковыми технологиями и обработкой в реальном времени, опыт работы в банковской сфере или регулируемых финансовых средах.

• Удаленная работа.