дата инженер юридического домена

Команда развивает потоки данных в прикладном юридическом домене и строит пайплайны от источников до автоматизированных систем-получателей.

• Собирать, анализировать и формализовать требования от бизнес-технологов и владельцев продуктов юридического блока;
• Искать, исследовать и подключать новые источники данных внутри КАП под задачи правового департамента;
• Выполнять разовые запросы по заявкам бизнеса для проработки требований, точечного анализа юридических метрик или поиска аномалий в данных;
• Разрабатывать ETL-процессы на Scala с использованием Apache Spark 3.2+ и доставлять подготовленные витрины данных в смежные автоматизированные системы;
• Оптимизировать производительность SQL-запросов к данным уровня HOF и Scala-кода;
• Обеспечивать стабильность продуктивных потоков;
• Разбирать инциденты третьей линии поддержки;
• Восстанавливать целостность данных после сбоев;
• Работать с логами YARN и HDFS;
• Взаимодействовать с командами DevOps для настройки CI/CD-пайплайнов доставки кода и оркестрации задач;
• Вести техническую документацию в Confluence и управлять задачами в Jira.

• Опыт работы Data Engineer от 2–3 лет;
• Уверенное владение Apache Spark версий 2.x или 3.x;
• Знание Scala как основного языка разработки трансформаций;
• Глубокое понимание архитектуры экосистемы Hadoop, включая YARN, HDFS и Hive Metastore;
• Экспертное владение SQL, включая оконные функции, сложные объединения и вложенные запросы;
• Навык анализа бизнес-требований и перевода их в технические спецификации;
• Практический опыт расследования и устранения последствий инцидентов L3 в продуктивной среде больших данных;
• Самостоятельность, умение декомпозировать задачи, оценивать сроки и доводить их до релиза без микроменеджмента;
• Знакомство с инструментами DevOps и практиками CI/CD для доставки Spark-приложений;
• Будет плюсом опыт работы с данными в финансовом секторе, ритейле или телекоме, знакомство со специфическими юридическими источниками, опыт использования AI-инструментов в разработке и навыки работы с генеративными AI-моделями.

• Ежегодный пересмотр зарплаты, квартальная и годовая премия;
• Корпоративный спортзал и зоны отдыха;
• Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития;
• Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа;
• Гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ;
• Подписка Прайм с возможностью совместного использования на трёх близких;
• Вознаграждение за рекомендацию друзей в команду Сбера.