дата инженер в финтех

Клиентом является международный стартап в сфере CFD, Forex и брокерских услуг. Команда русскоговорящая.

• Разрабатывать и поддерживать конвейеры Airflow;
• Переносить обработку данных из pandas в вычисления в хранилище данных Redshift;
• Переводить DWH с полного пересчёта истории на инкрементальную загрузку;
• Разрабатывать dbt-модели, включая слои, автоматические тесты и документацию;
• Настраивать мониторинг, оповещения и SLA по актуальности данных;
• Регулярно контролировать качество данных: полноту, соответствие источникам и корректность типов;
• Подключать новые источники, включая ERP-системы, продуктовые события и платёжные шлюзы;
• Оптимизировать тяжёлые SQL-запросы и контролировать расходы на инфраструктуру DWH;
• Вести актуальную документацию по конвейерам и моделям данных.

• От 2 лет опыта в Data Engineering или Data Analytics с сильной инженерной составляющей;
• Уверенный SQL и практический опыт работы с аналитическими базами данных: Redshift, ClickHouse, BigQuery или Snowflake;
• Production-уровень Python: структурирование проектов, обработка ошибок и логирование;
• Опыт работы с Apache Airflow: написание DAG, обработка зависимостей, обеспечение идемпотентности и backfill;
• Понимание многоуровневой архитектуры хранилища данных: сырой слой, тестовый слой и витрины;
• Опыт работы с S3 и EC2, понимание IAM и логики формирования стоимости сервисов;
• Владение Git и Code Review;
• Умение самостоятельно доводить задачи до продакшена;
• Английский на уровне A2 для свободного чтения технической документации.

• Зарплата 2000-2500$, выплата в крипте;
• Любая локация, кроме РФ;
• Гибкий график;
• Европейский часовой пояс.