Инженер данных
генерация резюме под вакансию
сопроводительное письмо
описание
AGIMA является крупнейшим интегратором диджитал-решений в России с собственной командой разработки, выпускающей крупные проекты для заказчиков из различных отраслей бизнеса.
задачи
- Разрабатывать и поддерживать процессы обработки данных;
- Проектировать и реализовывать загрузку структурированных данных и файлов формата CSV в базы данных;
- Писать сложные SQL-запросы с учетом партиционирования и распределения данных;
- Создавать и настраивать DAG-и на Python для управления зависимостями и расписаниями;
- Осуществлять мониторинг и отладку процессов в Apache Airflow;
- Работать с S3-совместимыми хранилищами для загрузки и хранения промежуточных и выходных данных.
требования
- Уверенное знание MPP-баз данных, таких как Greenplum, Redshift или Vertica;
- Глубокое понимание PostgreSQL, включая индексы, транзакции, оконные функции и работу с драйверами;
- Владение Python для обработки данных, включая библиотеки pandas, psycopg2, SQLAlchemy, boto3 и requests;
- Опыт работы с Apache Airflow;
- Понимание принципов ETL;
- Опыт работы с S3-совместимыми хранилищами;
- Будет плюсом опыт работы с Informatica, Talend, dbt или SSIS.
условия
- Гибкий график работы;
- Доступ к корпоративным курсам по менеджменту и дизайну;
- Участие в профильных конференциях с оплатой проезда и участия при выступлении в качестве спикера;
- Корпоративные мероприятия, клубы по интересам и выезды;
- Бесплатные билеты на забег RUNIT.
навыки
Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.