python-разработчик ETL-фреймворка

Привет! Мы команда, которая разрабатывает инфраструктуру и фреймворк для создания ETL-процессов на основе конфигураций. Мы ищем сильного Python-разработчика, который будет развивать инструменты обработки данных, создавать backend-компоненты и помогать командам эффективно работать с большими объёмами данных.

• Развивать ETL-фреймворк: создавать и улучшать инфраструктуру, которая позволяет описывать процессы обработки данных через конфигурации.
• Разрабатывать backend-компоненты и обвязки: реализовывать прикладную логику и вспомогательные сервисы, необходимые для работы фреймворка.
• Работать с SQL-шаблонами: дорабатывать шаблоны, из которых формируются SQL-запросы, учитывая особенности используемых баз данных.
• Решать задачи на стыке Python и баз данных: разрабатывать компоненты, взаимодействующие с БД, и учитывать принципы их работы, в том числе при асинхронном выполнении операций.
• Развивать инфраструктуру обработки данных: помогать обеспечивать преобразование исходных данных в структурированные и подготовленные для дальнейшего использования наборы данных.
• Взаимодействовать с командами данных: развивать инструменты и инфраструктуру с учётом задач специалистов, которые непосредственно работают с данными.

• Сильные навыки разработки на Python.
• Хорошее знание SQL и понимание принципов работы реляционных баз данных.
• Понимание асинхронного программирования и умение писать асинхронный код.
• Понимание того, как устроены базы данных и как особенности их работы влияют на выполнение запросов.
• Будет плюсом: Понимание принципов работы аналитических и распределённых баз данных; Общее представление о Big Data и инструментах обработки больших объёмов данных; Опыт работы с Vertica, Trino или Hadoop

• Условий в вакансии нет