Инженер данных
сопроводительное письмо
описание
Команда данных Казначейства Сбера разрабатывает распределённое хранилище, которое используется для обеспечения ключевых бизнес-процессов Банка. Перед командой стоят амбициозные задачи, связанные с внедрением AI и ML в управленческие и аналитические системы.
задачи
- Проектировать и реализовывать высоконагруженные распределённые решения.
- Участвовать в архитектурных сессиях, проектировать дизайн смежных систем и интеграций.
- Поддерживать и развивать архитектуру корпоративных хранилищ данных.
- Проектировать и реализовывать прикладные сервисы доступа к данным и администрирования хранилища.
- Повышать зрелость процессов управления данными.
- Выстраивать процесс разработки.
- Планировать и реализовывать технологические трансформации.
- Формировать требования и контролировать реализацию CI/CD, DataOps, MLOps.
- Проводить code review, обеспечивать соблюдение стандартов кодирования.
требования
- Опыт работы 5+ лет с технологическим стеком Hadoop (HDFS, YARN, Hive), Apache Spark.
- Отличные знания SQL (Advanced) и опыт работы в аналитике данных (DWH, Data Lake, Lake House).
- Опыт работы с ETL инструментами IPC или Apache Nifi.
- Практический опыт создания python приложений с использованием распределенных вычислений.
- Понимание принципов DDD, SOLID, паттернов проектирования и интеграции.
- Уверенные знания Python и опыт разработки с использованием PySpark.
- Понимание принципов CI/CD, подходов обеспечения качества.
- Опыт работы с AI инструментами повышения эффективности разработки ПО.
- Опыт работы с K8s, OpenShift.
- Будет плюсом опыт работы с PostgreSQL, Apache AirFlow.
условия
- Комфортный современный офис рядом с м. Ленинский проспект (ул. Вавилова, д. 19).
- Возможность выбрать удобный график – офис/гибрид.
- Ежегодный пересмотр зарплаты, годовая премия.
- Корпоративный спортзал и зоны отдыха.
- Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития.
- Программа адаптации IT Bootcamp.
- Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа.
- Ипотека для сотрудников выгоднее до 4%.
- Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнеров.
навыки