Описания нет
сегодня
Data Analyst / Data Engineer
ориентир по рынку
вакансия
зп не указана
в среднем
219 972 ₽
мэтч
Загрузи резюме, чтобы видеть мэтчи с вакансиейЗагрузи резюме, чтобы видеть мэтч с вакой
подготовься к отклику
ai-инструментыЧтобы адаптировать резюме под вакансию или составить сопроводительное письмо, загрузи резюме
описание
задачи
- Принимать и анализировать входящую документацию от заказчиков
- Детально разбирать и формализовывать требования, прорабатывать неясные моменты
- Оценивать возможность реализации с учётом используемого стека
- Анализировать влияние изменений на текущие процессы, модели данных, таблицы и связанные компоненты
- Разрабатывать и согласовывать концептуальные и логические решения
- Проектировать потоки обработки и преобразования данных с использованием Apache Spark
- Работать с данными в S3, организованными с использованием Apache Iceberg
- Писать SQL-код в Apache Spark для прототипирования, проверки гипотез и подтверждения корректности логики расчётов и моделей данных
- Принимать и тестировать патчи разработчиков на тестовых, предпродуктивных и продуктивных стендах
- Проверять корректность задач Spark, SQL-логики, загрузок в S3 и работы таблиц Iceberg
- Подготавливать и контролировать выпуск доработок в продуктивную среду
требования
- Опыт работы от 2 лет на позициях аналитика данных или инженера данных в области DWH/BI
- Практический опыт работы с Apache Spark
- Продвинутое знание SQL: сложные объединения, оконные функции, CTE, агрегации, подзапросы и оптимизация запросов
- Опыт оптимизации задач Spark и SQL-запросов на больших объёмах данных
- Опыт работы с S3
- Опыт работы с Apache Iceberg или понимание его ключевых возможностей
- Понимание принципов построения хранилищ данных, ETL/ELT-процессов, нормализации данных и организации потоков обработки
- Опыт работы с технической документацией BRD и FSD, умение писать её чётко и структурированно
- Опыт тестирования данных
- Опыт работы с системами контроля версий, включая Git
- Системное аналитическое мышление
- Коммуникабельность
- Самостоятельность и ответственность
- Внимание к деталям и аккуратность
- Будет плюсом: понимание принципов работы с Oracle и Greenplum, опыт работы в финансовой сфере, базовые знания Python для скриптинга и анализа данных, понимание методологий управления проектами Agile, Scrum и Kanban, опыт работы с ClickHouse, Airflow, SuperSet и FineBI, понимание принципов организации озёр данных и архитектуры lakehouse
условия
- Условий в вакансии нет
навыки
Если просят выйти из iCloud, прислать код из SMS, запустить или установить что-то, перевести деньги — не соглашайся: это мошенничество.
