A2 Consulting – представитель группы компаний КОРУСКонсалтинг, резидент ПВТ, команда профессионалов в области внедрения систем бизнес-анализа (BI) и корпоративных хранилищ данных (DWH) на предприятиях различных отраслей с покрытием региона СНГ, EU и USA. Наша основная задача – предоставлять своим клиентам конкурентные преимущества посредством построения (внедрения) современных систем в сфере данных – DataGovernance, DataWareHouse и Buisness Intelligence. В связи с активным ростом группа компаний A2 Consulting ищет в свою команду Data Engineer для участия в проектах по внедрению решений класса Data Lakehouse (DLH).
Data engineer
подготовься к отклику
ai-инструментыЧтобы адаптировать резюме под вакансию или составить сопроводительное письмо, загрузи резюме
описание
задачи
- Проектирование, разработка и поддержка ETL/ELT-процессов загрузки данных из источников в Data Lakehouse
- Разработка трансформаций данных по слоям решения
- Сбор витрин данных по разработанному ТЗ для сервисов и BI-аналитики
- Настройка и сопровождение оркестрации пайплайнов в Apache Airflow
- Работа с табличным слоем на Apache Iceberg и объектным хранилищем
- Участие в контроле качества данных
- Написание документации, комментирование кода
- Взаимодействие с Data-аналитиками и архитекторами для создания новых и оптимизации существующих витрин
требования
- Опыт работы в качестве Data Engineer от 2 лет
- Уверенное знание SQL и реляционных баз данных
- Уверенное знание Python
- Опыт работы с оркестраторами ETL-процессов (Apache Airflow)
- Понимание концепций Data Lakehouse и медальонной архитектуры
- Опыт построения ETL/ELT pipelines (пакетная и потоковая обработка)
- Будет плюсом: Опыт работы с объектным хранилищем (S3-совместимое MinIO/ Ceph) и табличными форматами (Apache Iceberg / Hudi / Delta); Опыт работы с Apache Spark; Опыт работы с SQL-движками Trino / Presto; Опыт работы с Apache Kafka и CDC (Debezium); Опыт работы с dbt; Опыт внедрения решений на Kubernetes; Опыт работы в банковской / финансовой сфере; Знакомство с инструментами data governance (Apache Atlas, Apache Ranger)
условия
- Стать сотрудником группы компаний КОРУСКонсалтинг – ТОП-10 IT-интеграторов на пространстве СНГ
- Работу в компании-лидере рынка BI в Беларуси, резиденте Парка Высоких Технологий с офисами в EU и USA и экспертным коллективом
- Совместное развитие в технологичной команде, участие в интересных проектах в перспективной и активно развивающейся отрасли
- Прозрачную схему мотивации, официальное оформление в штат, социальный пакет и корпоративные бонусы (английский, спорт, ДМС, такси, скидки у партнеров, фрукты и ивенты в офисе)
- Стабильную и конкурентоспособную зарплату, привязанную к курсу USD
- Комфортный офис в 10 минутах от метро «Площадь победы»
- Базовый график 5/2 с 9.00 до 18.00 с возможностью организации гибкого рабочего времени
- Личностное и профессиональное развитие за счет компании, участие в конференциях и семинарах
- Открытую корпоративную культуру, дружную команду, здоровую атмосферу и насыщенный календарь ярких корпоративов
навыки
Если просят выйти из iCloud, прислать код из SMS, запустить или установить что-то, перевести деньги — не соглашайся: это мошенничество.