Data Engineer

Команда данных Казначейства Сбера разрабатывает распределённое хранилище, которое используется для обеспечения ключевых бизнес-процессов банка, а также внедряет AI и ML в управленческие и аналитические системы.

• Проектировать и реализовывать высоконагруженные распределённые решения;
• Участвовать в архитектурных сессиях, проектировать дизайн смежных систем и интеграций;
• Поддерживать и развивать архитектуру корпоративных хранилищ данных (DWH, Data Lake, LakeHouse);
• Проектировать и реализовывать прикладные сервисы доступа к данным и администрирования хранилища;
• Повышать зрелость процессов управления данными;
• Выстраивать процесс разработки;
• Планировать и реализовывать технологические трансформации;
• Формировать требования и контролировать реализацию CI/CD, DataOps, MLOps;
• Проводить code review, обеспечивать соблюдение стандартов кодирования.

• Опыт работы от 5 лет с технологическим стеком Hadoop (HDFS, YARN, Hive), Apache Spark;
• Отличное знание SQL (Advanced) и опыт работы в аналитике данных (DWH, Data Lake, Lake House);
• Опыт работы с ETL инструментами IPC или Apache Nifi;
• Практический опыт создания Python приложений с использованием распределенных вычислений;
• Понимание принципов DDD, SOLID, паттернов проектирования и интеграции;
• Уверенные знания Python и опыт разработки с использованием PySpark;
• Понимание принципов CI/CD, подходов обеспечения качества;
• Опыт работы с AI инструментами повышения эффективности разработки ПО;
• Опыт работы с K8s, OpenShift;
• Будет плюсом опыт работы с PostgreSQL, Apache AirFlow.

• Комфортный современный офис рядом с м. Ленинский проспект;
• Ежегодный пересмотр зарплаты, годовая премия;
• Корпоративный спортзал и зоны отдыха;
• Более 400 образовательных программ СберУниверситета;
• Программа адаптации IT Bootcamp;
• Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа;
• Ипотека для сотрудников выгоднее до 4%;
• Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров.