data engineer

Загрузи резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

Компания занимается разработкой IT-систем для логистики и развивает крупный проект в сфере F&R. В фокусе работы — создание и поддержка систем для обработки данных.

Вы будете проектировать, разрабатывать, тестировать и поддерживать пайплайны для обработки данных в реальном времени и пакетами. Вам нужно будет разрабатывать и улучшать потоковые приложения на Apache Flink, создавать и поддерживать DAG в Apache Airflow для управления всеми процессами данных, а также проектировать и оптимизировать данные в распределённой базе данных на основе PostgreSQL и Citus. Также Вам предстоит участвовать в проектировании архитектуры хранения и обработки данных.

• Имеете знание и опыт работы с репликацией и кластеризацией PostgreSQL (Citus или похожими решениями)
• Имеете опыт работы с Apache Flink, включая подходы CDC
• Умеете выполнять сложную нормализацию данных
• Умеете писать и улучшать сложные SQL-запросы для извлечения, преобразования и агрегирования данных в Spark
• Понимаете принципы распределённой обработки данных, параллельного выполнения запросов и оптимизации кэширования

• Оформление в аккредитованную IT-компанию
• ДМС со стоматологией и льготными условиями для членов семьи
• Предоставление корпоративной техники
• Удалённый или гибридный формат работы
• Дружеская атмосфера и поддержка команды профессиональных и активных коллег
• Корпоративные скидки и программы лояльности от партнёров