Инженер данных

Команда премиальных каналов обслуживания специализируется на работе с VIP-клиентами и высокосостоятельными лицами, создавая уникальные решения для обеспечения высокого уровня сервиса и безопасности.

• Разрабатывать надежные и масштабируемые конвейеры обработки данных с использованием Hadoop и Apache Spark;
• Обеспечивать высокую производительность хранилищ данных, оптимизируя процессы ETL и построение аналитических отчетов;
• Проектировать архитектуру хранения и обработки данных в СУБД Greenplum и экосистеме Hadoop;
• Участвовать в развитии инфраструктуры обработки данных, поддерживая её стабильность и безопасность;
• Совершенствовать существующие механизмы работы с большими объемами данных и разрабатывать новые алгоритмы анализа и обработки;
• Разрабатывать, оптимизировать и сопровождать масштабные ETL/ELT процессы;
• Интегрировать и объединять данные из множества внутренних и внешних источников, включая потоки данных Kafka;
• Проектировать и развивать корпоративное хранилище данных: создавать витрины данных для аналитики и отчётности, оптимизировать таблицы и запросы;
• Автоматизировать и оркестровать процессы обработки данных;
• Обеспечивать надежность, отказоустойчивость и качество данных, мониторить производительность и устранять узкие места;
• Взаимодействовать с бизнес- и ИТ-командами для уточнения требований и реализации проектов.

• Опыт работы в роли Data Engineer от 2 лет;
• Уверенное владение SQL: написание сложных запросов, оптимизация производительности, понимание принципов проектирования баз данных и хранилищ;
• Практическое применение технологий Big Data: Hadoop, Apache Spark, а также систем хранения и обработки данных (Hive, Impala, Greenplum);
• Опыт использования систем оркестрации и планировщиков задач (Apache Airflow, Oozie);
• Знание инструментов контейнеризации и облачной оркестрации (Docker, Kubernetes) и опыт работы с потоковыми данными (Kafka);
• Понимание принципов распределенных вычислений, высоконагруженных систем и обработки больших объемов данных;
• Английский язык для чтения технической литературы и документации;
• Будет плюсом опыт работы с данными в банковской или финансовой сфере, знакомство с дополнительными инструментами big data и stream-аналитики, знание Java или Scala, наличие сертификатов в области Data Engineering или Big Data, участие в профессиональных сообществах, конференциях и open-source проектах.

• Гибридный график и гибкое расписание работы;
• Корпоративное обучение: доступ к программам СберУниверситета, внутренним тренингам и конференциям;
• Доступ к крупному хранилищу данных и новейшим технологиям Big Data;
• Участие в масштабных проектах;
• Официальное оформление по ТК РФ, стабильный оклад и ежегодная премия;
• Полный соцпакет: ДМС для сотрудника и семьи, льготные условия на продукты Сбера, корпоративные скидки и бонусы.