Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.
Data Engineer
генерация резюме
сопроводительное письмо
описание
Команда работает с данными, разрабатывает и поддерживает ETL-процессы, развивает решения для хранилищ данных на базе современных Big Data технологий.
задачи
- Разрабатывать и поддерживать ETL-пайплайны с использованием Spark (DataFrame API);
- Работать с данными в различных источниках и СУБД;
- Анализировать данные, выявлять и устранять ошибки в процессах загрузки;
- Участвовать в развитии решений DWH / Data Lake;
- Взаимодействовать с командами сопровождения: ставить задачи и готовить инструкции;
- Участвовать в тестировании, выполнять тестовые запросы совместно с командами сопровождения;
- Работать с системами контроля версий и процессами CI/CD.
требования
- Опыт разработки с SQL, Spark, Hadoop, Hive;
- Опыт работы с СУБД: Oracle, PostgreSQL, MySQL, MariaDB, MS SQL и др;
- Опыт разработки ETL-процессов;
- Понимание принципов построения DWH / Data Lake;
- Знание процессов CI/CD и опыт работы с Git;
- Умение анализировать данные, выявлять причины ошибок и формулировать гипотезы;
- Умение ставить задачи и писать инструкции для команд сопровождения;
- Уверенное владение Excel;
- Будет плюсом опыт работы с большими объемами данных, навыки оптимизации SQL-запросов, опыт работы с распределёнными системами обработки данных.
условия
- Условий в вакансии нет
навыки