Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.
data engineer
генерация резюме
сопроводительное письмо
описание
Описания нет
задачи
- Реализовывать высоконагруженные конвейеры обработки данных для репликации из ИТ-систем Банка;
- Выполнять комплексные задачи по подготовке данных в аналитических хранилищах (DataLake, SandBox, FeatureStore) для моделей машинного обучения;
- Разрабатывать и поддерживать документацию по функционалу;
- Отражать статус задач в Jira;
- Проверять качество кода (код-ревью) инженеров и младших инженеров данных.
требования
- Уверенное знание Python: структуры данных, алгоритмы, ООП, ФП, модульные и интеграционные тесты, библиотеки numpy, pandas;
- Опыт разработки и внедрения сервисов загрузки и обработки неструктурированных данных (текст, xml, json) из внешних источников;
- Способность разбираться с API поставщиков по документации;
- SQL: сложные запросы с оконными функциями, профилирование и оптимизация, работа с Oracle, Postgres, Greenplum;
- Знание инструментов разработки, планирования и мониторинга workflow для пакетной обработки данных;
- Airflow;
- Опыт сложных высоконагруженных приложений на PySpark, знание настроек Spark.
условия
- Пятидневка с 9 до 18, пятница сокращенная;
- Сложные задачи с большим массивом данных;
- Тренинги, вебинары, доступ к библиотекам Альпины и бизнес-изданий, скидки на курсы языков;
- Карьерный рост;
- Дружная команда профессионалов;
- ДМС со стоматологией, скидки на фитнес, спортивные сообщества;
- Скидки на туризм, еду, рестораны, магазины, салоны;
- Программа развития AI-грамотности с треками по нейросетям.
навыки