Data engineer

Добавь резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

Команда разрабатывает высоконагруженные конвейеры обработки данных для репликации из ИТ-систем банка и подготовки данных в аналитических хранилищах для моделей машинного обучения.

• Реализовывать высоконагруженные конвейеры обработки данных для репликации из ИТ-систем банка
• Выполнять комплексные задачи по подготовке данных в аналитических хранилищах (DataLake, SandBox, FeatureStore) для признаков моделей машинного обучения
• Разрабатывать и поддерживать документацию по функционалу
• Отражать статус задач в Jira
• Проверять качество кода (код-ревью) инженеров и младших инженеров данных

• Уверенное знание Python: структуры данных, алгоритмы, принципы ООП и ФП, модульные и интеграционные тесты, библиотеки numpy, pandas
• Опыт разработки и внедрения сервисов загрузки и обработки неструктурированных данных (текст, xml, json) из внешних источников
• Способность разбираться с API поставщиков по документации
• Уверенные навыки SQL: сложные запросы с оконными функциями, профилирование и оптимизация, работа с Oracle, Postgres, Greenplum
• Уверенное знание Airflow для разработки, планирования и мониторинга рабочих процессов
• Опыт разработки высоконагруженных приложений на PySpark, знание настроек Spark и их влияния на производительность

• Стабильная работа в крупном банке
• Конкурентная зарплата, соцпакет
• Условия для роста: конференции, тренинги, внутренние программы
• Дружный коллектив в одном департаменте по машинному обучению
• Передовой стек технологий, мощное оборудование
• Разнообразные задачи с выводом в продакшн и влиянием на бизнес и архитектуру
• Квартальный бонус
• ДМС, страхование жизни
• Корпоративное обучение