Инженер данных
генерация резюме под вакансию
сопроводительное письмо
описание
Команда занимается построением новых пайплайнов ETL-процессов, обеспечением чистоты и консистентности данных, а также поддержкой отказоустойчивости системы сбора, обработки и хранения информации для аналитики, отчетности и генерации идей.
задачи
- Разрабатывать и поддерживать ETL-процессы для сбора, обработки и загрузки данных;
- Участвовать в интеграции данных с внутренними и внешними сервисами;
- Разрабатывать и дорабатывать логику преобразования данных;
- Проводить тестирование и проверку качества разработанных решений;
- Искать и устранять узкие места в процессах обработки данных, повышать их производительность;
- Поддерживать и улучшать существующую инфраструктуру хранения данных;
- Разрабатывать внутренние инструменты для автоматизации задач аналитиков и других команд.
требования
- Опыт работы с ClickHouse или любой другой колоночной СУБД;
- Отличное знание Python;
- Опыт выстраивания ETL / ELT процессов;
- Опыт работы с Big Data;
- Опыт работы с реляционными СУБД (MySQL / PostgreSQL);
- Умение оптимизировать SQL запросы;
- Опыт работы с Apache Airflow или с другими оркестраторами ETL процессов;
- Опыт интеграции с внешними API;
- Опыт работы с Docker и Docker Compose;
- Уверенное владение готовыми LLM-based инструментами для решения прикладных задач разработки;
- Продвинутые знания Linux / MacOS;
- Уверенное использование Git;
- Будет плюсом понимание принципов построения и работы распределенных баз данных, опыт работы с библиотеками Pandas и Numpy.
условия
- Гибкий режим работы и выбор времени начала дня;
- Поддержка здорового питания в офисах;
- Частичная компенсация занятий с психологом;
- Подключение к программе ДМС в большинстве локаций;
- Современное оборудование и комфортные офисы;
- Участие в образовательном треке, частичная компенсация обучения и занятий иностранными языками;
- Бонусы на важные жизненные события и годовщины;
- Реферальная программа;
- Корпоративные мероприятия, турниры, тимбилдинги и мерч.
навыки
Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.