Data Engineer
генерация резюме под вакансию
сопроводительное письмо
описание
Команда отвечает за бесперебойную поставку данных в аналитическую платформу на базе Greenplum и ClickHouse, обеспечивая фундамент для построения моделей и принятия бизнес-решений.
задачи
- Обеспечивать поставку данных: загружать новые витрины данных в Лабораторию Greenplum и Clickhouse с помощью внутренних инструментов;
- Создавать собственные инструменты для поставки данных;
- Мониторить и оптимизировать ETL-процессы в Airflow и собственных решениях;
- Реагировать на сбои, находить и устранять узкие места в дата-пайплайнах для ускорения загрузки;
- Разрабатывать и внедрять проверки качества данных на всех этапах;
- Анализировать причины ошибок и исправлять их;
- Писать скрипты на Python для автоматизации повторяющихся задач по обработке данных;
- Разрабатывать и поддерживать техническую документацию и базу знаний по процессам;
- Тестировать новые технологии и инструменты для улучшения платформы.
требования
- Уверенное владение SQL: сложные запросы, оконные функции, CTE, умение читать планы выполнения для оптимизации;
- Навыки программирования на Python, опыт работы с библиотекой Pandas для обработки данных и написания скриптов автоматизации;
- Понимание принципов работы реляционных СУБД, архитектуры DWH, витрин данных и ETL/ELT-процессов;
- Опыт использования планировщиков задач (Airflow или аналоги);
- Проактивность, желание развиваться в инженерии данных и самостоятельно решать сложные проблемы;
- Способность эффективно взаимодействовать с другими командами;
- Свободное чтение технической документации на английском языке;
- Будет плюсом навыки работы с генеративными AI-моделями, опыт создания AI-агентов, опыт использования GigaChat, Kandinsky и аналогов в продуктах, инструментальное владение AI для анализа, генерации и автоматизации.
условия
- Ежегодный пересмотр зарплаты и годовая премия;
- Расширенный ДМС и льготное страхование для семьи;
- Уникальная система обучения для профессионального и карьерного развития;
- Выгодная ипотека для сотрудников;
- Подписка Прайм с возможностью совместного использования на трёх близких;
- Вознаграждение за рекомендацию друзей в команду;
- Корпоративная пенсионная программа.
навыки
Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.