Если просят войти через iCloud, отправить коды из SMS, запустить код, что-то установить, перевести деньги или сделать что угодно, связанное с деньгами, не соглашайтесь: это признаки мошенничества.
Инженер данных
генерация резюме
сопроводительное письмо
описание
Компания поддерживает партнеров в отраслях с высокими нагрузками и разрабатывает высокопроизводительные решения. Команда создает внутреннюю платформу для обработки больших объемов данных в реальном времени, интеграции сторонних сервисов и построения систем отчетности.
задачи
- Проектировать и поддерживать масштабируемые конвейеры обработки данных;
- Настраивать загрузку данных из Amazon RDS через Debezium и Kafka;
- Загружать и оптимизировать потоки данных в ClickHouse;
- Настраивать параметры хранения данных в ClickHouse;
- Использовать форматы Parquet и ORC для эффективного хранения в S3;
- Интегрировать наборы данных в системы бизнес-аналитики;
- Внедрять мониторинг и оповещения для конвейеров данных;
- Управлять инфраструктурой с помощью Terraform или AWS CDK.
требования
- Опыт создания конвейеров обработки данных с высокой пропускной способностью;
- Уверенное владение Kafka, MSK и Debezium или CilckPipes;
- Опыт работы с ClickHouse и архитектурой хранилищ данных;
- Знание SQL, Git и процессов CI/CD;
- Навыки работы с инфраструктурой как кодом через Terraform;
- Будет плюсом опыт работы с AWS Glue, Airflow, S3, dbt, MySQL binlog, инструментами бизнес-аналитики, а также навыки мониторинга и оптимизации запросов в ClickHouse и NodeJS.
условия
- 24 Дня оплачиваемого отпуска в год;
- 6 Дней оплачиваемого больничного;
- Официальное трудоустройство;
- Медицинская страховка;
- Корпоративные обеды;
- Доступ в тренажерный зал и спортивные занятия;
- Офис с зоной отдыха, фруктами и закусками.
навыки