описание
Проект крупной телекоммуникационной компании посвящён миграции и модернизации информационных систем с переходом на современный Apache-стек.
задачи
- Участвовать в миграции информационных систем на Apache-стек
- Собирать бизнес-требования и переводить их в технические спецификации
- Проектировать архитектурные решения для компонентов обработки данных на Spark, NiFi и Airflow
- Писать и оптимизировать сложный SQL-код для высоконагруженной среды
- Готовить проектную документацию: схемы AS-IS и TO-BE, ER-диаграммы, инструкции и тест-кейсы
- Проектировать интеграции Apache-стека с Kafka и внешними BI-системами
- Настраивать и контролировать потоковую обработку данных
- Отслеживать метрики и мониторить ETL-процессы с помощью Grafana и Prometheus
требования
- Опыт системного анализа ETL-процессов
- Умение переводить бизнес-требования в технические спецификации
- Опыт создания ER-диаграмм, пользовательских инструкций и тест-кейсов
- Опыт подготовки документации для пользователей и команд разработки
- Опыт участия в проектах миграции ETL-систем на Apache-стек
- Умение проектировать архитектуры для Spark, NiFi и Airflow
- Уверенное владение сложным SQL, включая оконные функции и соединения
- Навык оптимизации запросов для высоконагруженной среды
- Опыт проектирования интеграций Apache-стека с Kafka и BI-системами
- Опыт настройки потоковой обработки данных
- Опыт работы с Grafana и Prometheus для отслеживания и оповещений об ETL-процессах
- Опыт работы с биллинговыми системами и понимание специфики телеком-биллинга
- Будет плюсом: глубокое понимание телеком-домена и опыт обработки больших данных в реальном времени
условия
- Ставка до 220 000 руб. на руки в месяц
- Срок привлечения — 6 месяцев с возможностью продления
- Аутстаффинговая позиция