Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.
Инженер данных
генерация резюме
сопроводительное письмо
описание
Компания занимается разработкой программного обеспечения и IT-решений в сферах финансов, здравоохранения, электронной коммерции, интернета вещей, медиа, больших данных и машинного обучения.
задачи
- Анализировать существующие решения;
- Мигрировать витрины со стека Hadoop на стек Iceberg, Spark 3.5 и Airflow;
- Реализовывать недостающие для витрин реплики с источников с помощью кодо-генераторов;
- Заполнять документацию по разработанным решениям.
требования
- Опыт работы в роли инженера данных от 3-х лет;
- Знание Python для написания скриптов обработки данных, интеграций и автоматизации;
- Опыт работы с экосистемой Hadoop, включая HDFS и S3-совместимые хранилища;
- Владение SQL для написания сложных запросов и оптимизации;
- Знание Apache Iceberg и Apache Spark;
- Использование Apache Airflow для оркестрации и мониторинга дата-пайплайнов;
- Опыт работы с форматом Parquet и понимание преимуществ колоночного хранения;
- Опыт работы в Jira и Confluence для ведения задач и документации;
- Использование Git для контроля версий кода и конфигураций;
- Понимание принципов CI/CD;
- Умение работать с XML и JSON;
- Навыки системного анализа;
- Опыт проектирования, реализации и оптимизации витрин данных;
- Базовые знания реляционных СУБД и понимание Kafka.
условия
- Оформление по ТК РФ;
- ДМС со стоматологией;
- Частичная компенсация затрат на спорт и коворкинг;
- Оплачиваемый бенч и sick-days;
- Прозрачная система оценки эффективности и менторство;
- Доплаты за менторство, ведение обучающих курсов и ревью проектов;
- Доступ к корпоративному порталу обучения, участие в митапах и конференциях;
- Корпоративные мероприятия и подарки для семей сотрудников.
навыки