Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.

Data Never Lies

сегодня

data engineer

выше рынка на 22,7%

вакансия 256 000 ₽

в среднем 208 635 ₽

Добавь резюме в профиле, чтобы видеть % мэтча с вакансией

генерация резюме

Добавь резюме в профиль, чтобы сгенерировать временное CV под эту вакансию

сопроводительное письмо

Добавь резюме в профиле, а нейросеть определит твою категорию. Затем ты сможешь генерировать сопроводительные письма для вакансий этой категории

описание

Команда помогает бизнесу анализировать данные и превращать инсайты в действия.

задачи

Подключаться к различным источникам данных;
Извлекать данные через REST API, базы данных, файлы и сторонние платформы;
Обрабатывать и загружать данные в хранилище для аналитики и подготовки отчетов;
Создавать стабильные процессы передачи данных с логированием, обработкой ошибок, повторными попытками и проверкой качества.

требования

Уверенное владение Python и практический опыт его применения в задачах обработки данных;
Опыт создания конвейеров для загрузки, обработки и трансформации данных;
Опыт работы с REST API, включая аутентификацию, пагинацию, лимиты запросов и обработку ошибок;
Понимание принципов построения отказоустойчивых систем;
Опыт настройки инкрементальной загрузки данных;
Умение работать с JSON и полуструктурированными данными;
Глубокие знания SQL, включая JOIN, CTE, агрегатные и оконные функции;
Опыт загрузки данных в базы или хранилища вроде PostgreSQL, BigQuery, Snowflake, Redshift или MS SQL;
Понимание подходов ETL и ELT;
Опыт настройки логирования, мониторинга и базового устранения неполадок;
Опыт работы с Git;
Будет плюсом опыт работы с dbt, Spark, PySpark, инструментами оркестрации (Airflow, Prefect, Dagster), реализация проверок качества данных, работа с облачными хранилищами (AWS S3, Google Cloud Storage, Azure Blob Storage), Docker, понимание принципов моделирования данных, оптимизация SQL-запросов, опыт работы с BI-инструментами, подготовка наборов данных для отчетности, понимание облачных платформ (GCP, AWS, Azure), опыт с CI/CD и навыки документирования логики конвейеров.

условия

Разнообразные проекты в различных сферах;
Адекватный график с фокусом на задачи, а не на отработанные часы;
Команда, которая ценит экспертизу и чувство юмора;
Возможность выбора между глубоким погружением в один масштабный проект или работой с несколькими клиентами.

навыки

python sql etl elt rest api git postgresql bigquery snowflake redshift json data pipelines data warehousing

Добавить в отклики

Email В отклики