Сейчас мы в поиске Дата инженера для работы над крупным банковским проектом по репликации данных из S3 в Hadoop
сегодня
Data engineer
ориентир по рынку
вакансия
зп не указана
в среднем
205 923 ₽
мэтч
Загрузи резюме, чтобы видеть мэтчи с вакансиейЗагрузи резюме, чтобы видеть мэтч с вакой
подготовься к отклику
ai-инструментыЧтобы адаптировать резюме под вакансию или составить сопроводительное письмо, загрузи резюме
описание
задачи
- Реализовывать репликацию данных
- Разрабатывать ETL-процессы для интеграционных задач и тестировать их
- Декомпозировать задачи, оценивать длительность и трудоемкость каждого этапа
- Анализировать и формализовать требования заказчика
- Собирать прототип решения
- Анализировать качество данных
- Писать проектную документацию (FSD, BRD, регламент, Admin Guide, User Guide)
- Тестировать функционал и передавать заказчику
- Выполнять ad-hoc выгрузки по требованиям заказчика
требования
- Уверенное владение SQL
- Опыт работы с Python
- Опыт работы с Apache Spark, Hadoop\S3\S3-like, Airflow
- Навыки декомпозиции сложных задач и управления приоритетами
- Способность создавать понятную и структурированную техническую документацию
- Будет плюсом: Опыт работы с Parquet\ORC, Apache Iceberg; Опыт работы с Kafka; Знание архитектуры Data Vault
условия
- Внутренние семинары, внутренние митапы, мы очень любим учиться новому
- ДМС со стоматологией для сотрудников и скидку на покупку ДМС для ближайших членов семьи
- Технику для комфортной работы
- Сессии профессионального развития персонала, результатом которой является план индивидуального развития каждого сотрудника
навыки
Группа ИТ-компаний для цифровой трансформации крупных организаций: внедрение и поддержка ИС, заказная разработка, консалтинг, проектное управление и ИТ-аутсорсинг.
Подробнее о компании →Если просят выйти из iCloud, прислать код из SMS, запустить или установить что-то, перевести деньги — не соглашайся: это мошенничество.
