data engineer
генерация резюме под вакансию
сопроводительное письмо
описание
Компания AGIMA разрабатывает цифровые продукты для производителей молочной продукции.
задачи
- Реализовывать загрузку CSV и структурированных данных в базы данных;
- Писать сложные SQL-запросы;
- Писать DAG-ы на Python;
- Управлять зависимостями и настраивать расписания;
- Выполнять мониторинг и отладку процессов;
- Осуществлять загрузку и хранение промежуточных и выходных данных в S3-совместимых хранилищах.
требования
- Уверенное знание MPP-баз данных (Greenplum, Redshift, Vertica);
- Понимание партиционирования, distribution keys и работы с большими объёмами данных;
- Знание PostgreSQL (индексы, транзакции, оконные функции, работа с pg-драйверами);
- Уверенное владение Python (pandas, psycopg2, SQLAlchemy, boto3, requests);
- Умение писать читаемый и поддерживаемый код;
- Опыт работы с Apache AirFlow;
- Понимание принципов ETL;
- Опыт работы с S3-совместимыми хранилищами;
- Будет плюсом опыт работы с Informatica, Talend, dbt или SSIS.
условия
- Оплата до 970 р/час на руки;
- Оформление по ГПХ с физлицом;
- Гибкий график 5/2 с 10:00 до 19:00 по Москве с возможностью подстройки часов;
- Работа в часовом поясе Москвы;
- Участие в клубах по интересам, выездах на природу и корпоративных вечеринках;
- Поддержка в создании личного бренда.
навыки
Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.