Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.
Data Engineer
генерация резюме
сопроводительное письмо
описание
Описания нет
задачи
- Исследовать источники и разрабатывать ETL-процессы по загрузке данных в DWH;
- Разрабатывать и поддерживать витрины;
- Участвовать в проектировании модели данных хранилища;
- Разрабатывать, поддерживать и оптимизировать механизмы работы с DataLake;
- Разрабатывать, поддерживать компоненты системы потоковой обработки данных.
требования
- Глубокие знания Python (3.10+, threading, async) в работе с данными (PySpark, psycopg2, pandas);
- Умение строить сложные SQL-запросы и оптимизировать их, знание диалектов SparkSQL, PostgresSQL;
- Опыт реализации ETL/ELT-процессов (оркестрация на Airflow);
- Понимание принципов построения DWH и/или DataLake;
- Понимание жизненного цикла Data-products;
- Работа с системами контейнеризации (Docker, Docker Compose);
- Ориентация в технологиях обработки больших данных;
- Будет плюсом знание классических схем хранилища данных и их достоинств/недостатков, опыт с брокерами сообщений (Kafka) и стриминговой загрузкой, построение Data Pipelines на Spark с Airflow, работа с облачной инфраструктурой, Kubernetes.
условия
- Оформление по трудовому законодательству РФ;
- Оклад + годовой бонус;
- ДМС со стоматологией для детей и родственников;
- Прозрачная мотивация с влиянием на доход;
- Работа в команде профи;
- Участие в создании инновационных продуктов;
- Гибкое начало дня, пятница сокращённая;
- Возможность удалёнки;
- Офис в центре Москвы;
- Корпоративная мобильная связь;
- Льготная ипотека и потребкредиты;
- Вертикальный и горизонтальный рост;
- Бонусы от партнёров;
- Бонус за рекомендацию;
- Материальная помощь при рождении детей и семейных обстоятельствах;
- Обучение в корпоративном университете за счёт компании;
- Участие в конференциях;
- Корпоративная жизнь: спорт, клубы по интересам.
навыки