scala developer

Компания предоставляет услуги технологического консалтинга, разработки платформ и продуктов, искусственного интеллекта и продвинутой аналитики.

• Проектировать, разрабатывать и оптимизировать масштабируемые конвейеры обработки больших данных;
• Реализовывать и проверять сложные задачи по обработке данных для обеспечения точности и надежности метрик;
• Взаимодействовать с облачной инфраструктурой и Kubernetes для управления и мониторинга работы Spark;
• Оркестровать сложные рабочие процессы и конвейеры с помощью Apache Airflow;
• Создавать и поддерживать надежные архитектуры потоковой передачи данных;
• Проектировать и запрашивать сложные модели данных в различных базах данных;
• Интегрировать практики DevOps и CI/CD в жизненный цикл данных.

• Опыт разработки на Scala и глубокое знание Apache Spark;
• Практический опыт работы со Spark Streaming для потоковой обработки данных;
• Понимание работы Kubernetes применительно к инфраструктуре Spark;
• Опыт работы с распределенными хранилищами и форматами данных типа Hive и Iceberg;
• Опыт оркестрации рабочих процессов с помощью Apache Airflow;
• Свободное владение SQL и продвинутые знания SparkSQL;
• Понимание технологий распределенных вычислений, архитектурных паттернов и опыт работы с Hadoop;
• Будет плюсом практический опыт работы с Apache Flink, знакомство с Claude для автоматизации рабочих процессов, опыт внедрения хранилищ данных или систем аналитики, а также навыки в DevOps и построении CI/CD конвейеров.

• Работа над передовыми проектами;
• Конкурентная зарплата;
• Гибкий график;
• Медицинская страховка и спортивные программы;
• Корпоративные мероприятия;
• Возможности для профессионального развития;
• Оборудованный офис.