Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.
scala developer
генерация резюме
сопроводительное письмо
описание
Команда разрабатывает систему для обработки данных о продажах, строит процессы извлечения, преобразования и загрузки данных, а также формирует витрины и отчеты для аналитики и пользователей. Проект работает с петабайтными объемами информации, ежедневно обрабатывая сотни терабайт данных.
задачи
- Построить и поддерживать процессы извлечения, преобразования и загрузки данных для обработки больших объемов с использованием Spark и Scala;
- Оптимизировать скорость обработки данных и потребление системных ресурсов;
- Находить и устранять причины ошибок и аномалий в данных;
- Создавать оптимальные SQL-запросы для анализа больших объемов данных по требованиям бизнеса.
требования
- Владеете Scala или Java с готовностью быстро освоить Scala;
- Знаете консольный минимум Linux;
- Имеете опыт работы со Spark и понимаете принципы его работы;
- Знаете основы работы с базами данных и уверенно владеете SQL;
- Свободно владеете английским на уровне B1 и выше;
- Будет плюсом опыт работы с Scala Dataframe/Dataset API, построения и оркестрации процессов извлечения, преобразования и загрузки данных для больших данных, оптимизации Spark-запросов, настройки ресурсов, Zeppelin, Jupyter, ClickHouse, NoSQL, Apache Airflow, Hadoop, HDFS, Parquet, Hive, GitLab CI, Bash и Python.
условия
- Работа в международной команде;
- Участие в иностранных и российских проектах;
- Оформление по Трудовому кодексу РФ;
- Оплата больничного и отпуска в полном объеме;
- ДМС со стоматологией;
- Предоставление техники для работы;
- Корпоративные обучающие программы;
- Возможности для профессионального роста;
- Демократичный подход к процессам и гибкое начало рабочего дня.
навыки