data engineer
генерация резюме под вакансию
сопроводительное письмо
описание
Команда реализует продукт кредитования юридических лиц сегмента малого и микробизнеса в банковской сфере. После завершения процесса миграции на новые системы ведется активное развитие продукта.
задачи
- Исследовать источники данных, включая внешние данные, реплики автоматизированных систем банка и другие витрины;
- Проводить разведочный анализ данных;
- Разрабатывать и тестировать витрины данных на основе требований стейкхолдеров с использованием Spark (Scala, Java, Python);
- Поддерживать существующие витрины данных;
- Разрабатывать, сопровождать и развертывать в продуктовом контуре сервисы передачи данных;
- Проводить проверку кода изменений, предлагаемых коллегами.
требования
- Опыт работы от 1 года;
- Знание SQL на уровне аналитических запросов, включая подзапросы, агрегацию и оконные функции;
- Умение работать с git и bash;
- Знание языков программирования Java, Scala или Python;
- Понимание работы Hadoop и принципов распределенной обработки данных;
- Опыт разработки на Spark и PySpark;
- Навыки оптимизации выполнения сценариев на Spark;
- Понимание процессов ETL и ELT;
- Будет плюсом опыт использования Apache Oozie.
условия
- Участие в интересных проектах;
- Возможности профессионального и карьерного роста;
- Работа в команде профессионалов;
- Частичная оплата языковых курсов;
- Специальные тарифы в спортивные клубы.
навыки
Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.