data engineer

Добавь резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

Циан — это платформа, которой ежемесячно пользуются более 20 миллионов уникальных пользователей, и на которой публикуется более 2,2 миллионов актуальных объявлений. Компания входит в 20-ку самых дорогих компаний рунета по версии Forbes и является единственным российским proptech-проектом в топ-10 лучших сервисов по недвижимости в мире. Команда дата-инженеров отвечает за платформу данных Циан — инфраструктуру для аналитики, ML и стратегических решений компании, работая с real-time потоками, качеством данных, архитектурой хранилищ, автоматизируя обработку и делая платформу удобной для команд аналитики и ML. Команда небольшая и автономная, что позволяет влиять на технические стандарты и напрямую формировать архитектурные решения.

Вам нужно будет работать над платформенным решением по обработке данных для внутренних проектов, включая data injection (загрузка данных из kafka во внутреннее хранилище), интеграцию Airflow с использованием собственной библиотеки для унификации работы, развитие собственного Feature store для улучшения метрики ttm проектных команд, а также заниматься data catalog, миграцией в k8s и разработкой streaming pipeline для продуктовых команд.

• Опыт проектирования и поддержки масштабных пайплайнов на Spark и Airflow.
• Уверенное понимание принципов DWH, опыт с Hive, PostgreSQL или Cassandra.
• Опыт работы в облаке (Yandex Cloud, AWS, GCP), в том числе с S3, ClickHouse, Greenplum, K8s.
• Сильные SQL-навыки и умение проектировать архитектуру данных под задачи аналитики и ML.
• Будет плюсом знание Scala.

• Удаленная работа с возможностью посещения офисов в Москве, Санкт-Петербурге и Новосибирске.
• В офисах доступны кухни, снеки, фрукты, кофе, чай, бесплатные парковки, тихие комнаты, массажное кресло и шлем, зона с Play Station.
• Большие возможности для роста и развития: менторство в первые месяцы, личный план развития, обучение, конференции.
• ДМС с первого рабочего дня (включая стоматологию, госпитализацию, страховку выезжающего за пределы страны).
• 5 дополнительных выходных дней в год.
• Кафетерий льгот с депозитом 25000 рублей на фитнес, обучение, развлечения, консультации специалистов, покупки.
• Доплата за 10 дней больничного в год после испытательного срока.