Data Engineer

Объединённая компания Wildberries и Russ является международной технологической компанией, образованной в результате слияния IT-компании Wildberries и оператора наружной рекламы Russ.

• Обеспечивать стабильную, производительную и безопасную работу платформы данных на базе Trino, Spark, S3 и Apache Iceberg.
• Администрировать и управлять ролевой моделью доступа.
• Документировать изменения в проекте.
• Настраивать, обновлять, мониторить и оптимизировать кластеры Trino.
• Настраивать коннекторы Iceberg и S3.
• Оптимизировать производительность запросов и работу Iceberg.
• Разрабатывать и внедрять централизованные ролевые модели для доступа к данным и ресурсам платформы.

• Понимаете взаимодействие Spark с Iceberg и S3.
• Имеете опыт эксплуатации Apache Iceberg, включая администрирование таблиц и настройку Hive Metastore.
• Применяете на практике compaction, expiration snapshots, time travel и schema evolution.
• Владеете Linux, Bash и Python для автоматизации.
• Имеете опыт управления политиками и правами доступа через Ranger в S3 и Iceberg.
• Имеете опыт разработки и внедрения централизованной ролевой модели для доступа к данным и ресурсам.
• Будет плюсом знание основ IaC (Terraform, Ansible), опыт администрирования Greenplum или ClickHouse, опыт настройки маскирования данных и фильтрации на уровне строк в Ranger для Trino и Spark, опыт работы с Airflow и администрирования Superset.

• Корпоративный пакет ДМС со стоматологией.
• Корпоративный спорт, консультации психолога и программы развития управленческих навыков.
• Собственный корпоративный университет и языковые клубы.
• Скидки на обучение, страхование и покупки.
• Бесплатное питание в офисе и современная корпоративная техника.
• Гибкий подход к сочетанию карьеры и личной жизни.