data engineer

Загрузи резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

Компания работает в сфере iGaming, у неё есть несколько онлайн-казино, партнёрские программы и беттинг-продукт, которые успешно развиваются много лет. Сейчас команда масштабируется и хочет перейти на собственную технологическую экосистему. Команда распределённая, в ней больше 110 человек из разных стран, и в ней ценят открытость и дружескую атмосферу.

Вам нужно будет разрабатывать и поддерживать ETL/ELT-потоки данных между разными системами, такими как ClickHouse, BigQuery, MySQL, PostgreSQL, Kafka и S3. Вы будете интегрировать внешние источники данных в корпоративное хранилище, проектировать и улучшать дата-пайплайны с помощью Airflow, Airbyte, dbt и других инструментов. Также вам предстоит готовить дата-марты для BI-систем, писать SQL-вью для расчёта ключевых метрик и следить за качеством данных и работой пайплайнов.

• Имеете опыт работы с системами хранения данных, такими как ClickHouse, PostgreSQL и MySQL
• Умеете уверенно писать и улучшать сложные SQL-запросы
• Имеете опыт работы с Kafka, включая producers, consumers, topics и SSL
• Владеете Python и библиотеками pandas, clickhouse-connect, airflow, requests
• Имеете опыт работы с ETL-инструментами, например Airflow и Airbyte
• Понимаете архитектуру DWH и принципы создания BI-отчётности
• Владеете Git
• Знаете CI/CD и контейнеризацию (Docker / Podman / k8s / Helm)
• Понимаете английский язык на уровне чтения технической документации

• Удалённая работа