Data engineer

грейд
senior
формат
офис Алматы
страна
Казахстан
опубликована
сегодня

описание

Описания нет

задачи

  • Участие в разработке новой Near-Realtime платформы данных
  • Развивать архитектуру DWH и LakeHouse, проектировать логическую модель данных
  • Обеспечивать качество данных: внедрять проверки, мониторинг, алерты, контроль полноты, актуальности и согласованности данных
  • Поддержка и развитие существующего DWH на базе GreenPlum
  • Проектировать, разрабатывать и поддерживать надежные и быстрые пайплайны обработки данных
  • Интеграция новых источников данных: транзакционные БД, стриминг, API, файлы
  • Оптимизировать SQL-запросы, модели данных, процессы загрузки и хранение данных
  • Сопровождать production-пайплайны, расследовать инциденты, устранять причины сбоев и предотвращать их повторение
  • Развивать каталог данных, документировать источники, бизнес-правила, lineage, SLA, структуру витрин и технические решения

требования

  • Уверенно знаете SQL на уровне оптимизации запросов
  • Понимание принципов ETL/ELT, batch- и streaming-обработки данных
  • Опыт работы с промышленными СУБД и аналитическими хранилищами данных
  • Знание принципов моделирования данных: normal form, star/snowflake schema, Data Vault или аналогичные подходы
  • Опыт работы с оркестраторами пайплайнов, например Apache Airflow, Dagster, Prefect или аналогами
  • Понимание DevOps-практик: Git, CI/CD, контейнеризация, мониторинг, логирование
  • Умение разбираться в бизнес-требованиях и переводить их в надежные технические решения

условия

  • Конкурентоспособную заработную плату
  • Свободу в принятии решений и возможность карьерного роста в активно развивающейся международной компании
  • Интересные и разнообразные задачи и проекты, которые позволяют напрямую влиять на бизнес и развитие продуктов
  • Работа в дружелюбной и динамичной команде профессионалов
  • Постоянное обучение, тренинги, возможность посещения профильных конференций и корпоративные мероприятия
  • Различные бенефиты и уникальные предложения на продукты компаний Freedom Holding Corp

навыки

компания

похожие вакансии

статьи для разработчиков