Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.

сегодня

Инженер данных

выше рынка на 8,2%
вакансия 303 000 ₽
в среднем 280 008 ₽
мэтч
Добавь резюме в профиле, чтобы видеть % мэтча с вакансией

генерация резюме

Добавьте резюме в профиль, чтобы сгенерировать временное CV под эту вакансию

сопроводительное письмо

Добавь резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

описание

Офис, есть релокация. Вне РФ и РБ

Salmon — лицензированный необанк, создающий современные банковские сервисы для миллионов жителей Филиппин и расширяющий присутствие в Южной Азии.

задачи

  • Проектировать, создавать и поддерживать масштабируемые ETL/ELT конвейеры с использованием Databricks и Apache Spark;
  • Реализовывать пакетную и потоковую передачу данных из различных источников;
  • Обеспечивать отказоустойчивость, эффективность и оптимизацию затрат конвейеров на AWS;
  • Разрабатывать и поддерживать архитектуру хранилищ данных с использованием AWS S3, Delta Lake и Databricks;
  • Внедрять архитектуру медальонного типа;
  • Оптимизировать форматы хранения данных и стратегии партиционирования;
  • Работать с сервисами AWS, включая S3, IAM, Lambda и Step Functions;
  • Управлять безопасным доступом к данным в средах AWS;
  • Разрабатывать блокноты и задания с использованием PySpark, SQL и Python;
  • Оптимизировать задания Spark для повышения производительности и снижения затрат;
  • Управлять рабочими процессами, заданиями и конфигурациями кластеров в Databricks;
  • Внедрять Unity Catalog для управления данными и контроля доступа.

требования

  • Практический опыт работы с Databricks;
  • Глубокое знание Apache Spark (PySpark и/или Scala);
  • Уверенное владение Spark SQL и методами оптимизации производительности;
  • Опыт работы с Delta Lake и архитектурами хранилищ данных;
  • Владение Python для задач инженерии данных;
  • Опыт написания чистого, тестируемого и поддерживаемого кода;
  • Знание SQL для трансформации и анализа данных;
  • Опыт работы с Git и процессами контроля версий;
  • Развитые навыки решения проблем и аналитическое мышление;
  • Умение работать самостоятельно и брать на себя ответственность за конвейеры данных;
  • Хорошие коммуникативные навыки и способность к сотрудничеству в кросс-функциональных командах;
  • Внимание к деталям и фокус на корректности и надежности данных;
  • Будет плюсом знакомство с Unity Catalog или другими инструментами управления данными, опыт поддержки аналитических задач и BI, знание методов оптимизации затрат в AWS и Databricks, а также экспертные знания Spark.

условия

  • Офис, есть релокация.

прозрачные зарплаты в IT

Анонимные данные по зарплатам и грейдам

Посмотреть
График динамики зарплат
Откликнуться Добавить в отклики

Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.