data engineer

Добавь резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

Компания разрабатывает надежную и масштабируемую платформу финансовых данных с нуля на Google Cloud. Позиция сосредоточена на построении надежных конвейеров данных, структурировании финансовых моделей данных и создании единого источника правды для финансовой отчетности и аналитики.

• Проектировать, разрабатывать и поддерживать надежные ETL/ELT конвейеры с использованием Golang, Python, Apache Airflow и dbt.
• Интегрировать данные из нескольких источников, включая основную транзакционную базу данных PostgreSQL, внешние API и потоки данных NATS в BigQuery.
• Перестраивать и стандартизировать логику трансформации данных для построения надежных витрин данных для финансовой отчетности и учета.
• Реализовывать автоматизированные проверки качества данных, управление метаданными и SLA для обеспечения точности и прослеживаемости.
• Оптимизировать аналитические рабочие нагрузки и потоки данных в BigQuery для сокращения времени выполнения отчетов.
• Поддерживать и улучшать процессы CI/CD с использованием GitHub и GitHub Actions.

• 3+ года опыта работы в должности Data Engineer, предпочтительно в FinTech или Crypto.
• Свободное владение SQL.
• Опыт работы с Golang (предпочтительно) или Python.
• Глубокий практический опыт работы с BigQuery как основным хранилищем данных.
• Знание PostgreSQL.
• Опыт работы с современными инструментами оркестрации и трансформации данных: Apache Airflow, dbt Core, Google Cloud Composer, Google Cloud Dataflow.
• Опыт работы с потоковой загрузкой данных.
• Опыт реализации мониторинга качества данных и управления метаданными.
• Понимание стандартов безопасности, целостности и соответствия финансовых данных.
• Будет плюсом опыт работы с облачными сервисами Google Cloud, серверными решениями и контейнеризацией.

• B2B сотрудничество.