Строится корпоративная платформа данных Lakehouse для банка в Армении. Она объединяет данные из банковских систем и других источников для создания доменных витрин, прежде всего финансового блока.
26 окт
data engineer банковских данных
ориентир по рынку
вакансия
зп не указана
в среднем
254 973 ₽
мэтч
Загрузи резюме, чтобы видеть мэтчи с вакансиейЗагрузи резюме, чтобы видеть мэтч с вакой
подготовься к отклику
ai-инструментыЧтобы адаптировать резюме под вакансию или составить сопроводительное письмо, загрузи резюме
описание
задачи
- Загружать данные пакетно и через CDC, объединять изменения, обрабатывать удаления и догружать историю
- Сверять данные с источником
- Создавать слои Bronze / Silver / Gold и модели на dbt
- Обеспечивать качество данных и отслеживание их происхождения
- Оптимизировать работу с таблицами на миллиарды строк
- Создавать правила, шаблоны и автоматические проверки для разработки с AI-агентами
требования
- Опыт в инженерии данных от 6 лет
- Обязателен опыт работы с банковскими данными
- Опыт создания DWH или Lakehouse вручную до появления AI-инструментов
- Экспертное знание SQL и уверенное владение Python
- Знание моделирования данных, включая grain, историчность и SCD
- Опыт работы с Iceberg, Trino или Spark, dbt, Airflow или аналогами
- Опыт работы в закрытых контурах
- Будет плюсом: опыт с Debezium, Kafka Connect, Ansible или другими инструментами IaC
условия
- Ставка обсуждается индивидуально
- Локация — Ереван предпочтительно или РФ
- Командировки 1–2 раза в месяц на несколько дней
- Взаимодействие через ИП
- Долгосрочный проект
навыки
Если просят выйти из iCloud, прислать код из SMS, запустить или установить что-то, перевести деньги — не соглашайся: это мошенничество.
