Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.

YCLIENTS

сегодня

data engineer

выше рынка на 49,5%

вакансия 450 000 ₽

в среднем 300 988 ₽

Добавь резюме в профиле, чтобы видеть % мэтча с вакансией

генерация резюме

Добавьте резюме в профиль, чтобы сгенерировать временное CV под эту вакансию

сопроводительное письмо

Добавь резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

описание

Компания разрабатывает B2B SaaS-сервис для автоматизации бизнеса в сфере услуг.

задачи

Подключать источники данных и настраивать инкрементальную загрузку в хранилище.
Проводить проверку концепции для CDC через Debezium и Kafka.
Запускать процессы трансформации данных между слоями.
Определять стратегию выбора инструментов для аналитики и отчетности.
Настраивать мониторинг актуальности данных и автоматизировать процессы их восстановления.

требования

Уверенное владение SQL и опыт работы с инкрементами и витринами данных.
Опыт написания интеграций на Python.
Опыт работы с Airflow в промышленной среде, включая настройку зависимостей и повторных запусков.
Понимание принципов работы лейкхауса, включая работу со снимками данных, эволюцию схем и слоистость.
Будет плюсом опыт работы с Debezium, CDC, Trino и глубокая оптимизация ClickHouse.

условия

Работа над проектом с нуля без необходимости миграции легаси-систем.
Архитектурная свобода при выборе инструментов и паттернов.
Высокая ответственность за данные для более чем 50 тысяч бизнесов.
Высокая скорость разработки.

навыки

sql python airflow lakehouse clickhouse kafka debezium trino iceberg cdc api oltp

Добавить в отклики

Telegram В отклики