data engineer

Добавь резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

Компания Any является лидером в персонализации пользовательского опыта для e-commerce. Она работает с крупными ритейлерами, такими как Самокат и Золотое Яблоко, и входит в экосистему Т-Банк.

Вам нужно будет провести аудит существующих дата-пайплайнов, найти слабые места и спроектировать новую архитектуру для загрузки, трансформации и хранения данных, чтобы система выдерживала высокую нагрузку. Также предстоит разработать и внедрить единые стандарты для процессов ETL/ELT, включая управление схемами данных и ведение документации.

• Знаете Spark и один из языков Java 17 или Scala
• Понимаете, как проектировать архитектуру для высокой нагрузки и масштабировать решения
• Глубоко разбираетесь в ETL/ELT-процессах и архитектуре систем данных
• Имеете опыт профилирования и улучшения производительности пайплайнов
• Уверенно владеете SQL и умеете работать с хранилищами данных, такими как ClickHouse, PostgreSQL, S3 или похожими
• Имеете опыт работы с Airflow или аналогами, и умеете настраивать мониторинг и алерты (Будет плюсом)

• Формат работы: удалёнка в РФ или гибрид