Если вас просят войти через iCloud/Google, отправить коды из SMS или Telegram, запустить код или что-то установить, не соглашайтесь: это признаки мошенничества.
data engineer
сопроводительное письмо
описание
Компания Centicore занимается продуктовой разработкой проектов своих заказчиков под ключ.
задачи
- Сопровождение и анализ существующих процессов загрузки данных
- Тестирование и установка доработок в продуктивный контур
- Разбор технических ККД
- Контроль качества данных для ДПА
требования
- SQL
- Python
- Apache Spark
- Hadoop\S3\S3-like
- Apache Airflow
- Parquet\ORC
- Опыт работы с Jira + Confluence или аналогичными инструментами
- Git, CI/CD
- XML, JSON
- Навыки системного анализа, тестирования
- Базовое знание работы с РСУБД
- Kafka (базовые знания)
- ETL (Airflow)
- S3 (SDI, minio, spark, hive, impala, SPARK)
- SQL (DML, DDL), опыт работы с Oracle, GreenPlum, MSSQL, Hive, Impala
- Bash (система, скрипты)
- Английский — чтение документации
- Jira, Confluence
- CI/CD (Gitlab, Bitbucket, Bamboo)
- Будет плюсом знание Apache Iceberg
условия
- Зарплата: от 400 000 ₽ до 420 000 ₽ на руки
навыки