DevOps hadoop in Big Data

грейд
middle
страна
Россия
опубликована
вчера

описание

Нашему Партнёру, аккредитованной продуктовой IT компании, разработчику Big Data платформы для крупного российского банка, в связи с ростом команды требуется: Middle DevOps Hadoop Проект: Инновационная платформа на базе Hadoop с георезервированием для одного из крупнейших банков РФ. Платформа основана на Apache Ozone и совместима с Hadoop HDFS, решает проблему «маленьких файлов» в Hadoop, поддерживает доступ по протоколу S3 и обеспечивает сквозное шифрование данных, что делает её незаменимой для современных IT-инфраструктур.

задачи

  • деплой кластера Hadoop и сервисов платформы: Spark, HBase, Druid, Solr;
  • развертывание дополнительных узлов и настройка георезервированного режима работы;
  • разработка конфигурационных файлов (xml, properties) по образцам команды, настройка compute, storage и network;
  • участие в миграции без простоя: подготовка планов переключения, откат, мониторинг после запуска — под руководством Senior DevOps;
  • автоматизация рутины через AI-инструменты кодинга (vibe coding): генерация и ревью конфигов, скриптов, SQL-запросов;
  • ведение документации по миграции, поддержка промышленной эксплуатации.

требования

  • уверенная работа со скриптами автоматизации развёртывания (Ansible/Ambari Blueprints): написание плейбуков, работа с переменными, сетевыми правилами;
  • опыт эксплуатации или администрирования сервисов экосистемы Hadoop/Big Data;
  • опыт администрирования Linux (предпочтение RHEL/CentOS) на уровне уверенного пользователя.
  • регулярная практика вайбкодинга: Copilot, Cursor или аналоги — умение генерировать код ИИ-ассистентом, проверять и доводить до рабочего;
  • знание Java на уровне чтения и отладки кода — все сервисы (HDFS, Yarn, HBase) написаны на нём;
  • Python или Bash для скриптов автоматизации;
  • Будет плюсом: Scala как плюс (Spark); Опыт работы с Big Data-инфраструктурой; Опыт работы с Kubernetes; Опыт highload-разработки; Навыки DevOps / CI/CD

условия

  • Работу в стабильной аккредитованной IT-компании с большой историей;
  • Официальное трудоустройство с первого дня, полностью белые деньги;
  • Гибридный формат в Москве в режиме 3/2 2/3, комфортный офис в районе метро "Тульская";
  • ДМС со стоматологией, возможность получения льготной ипотеки,
  • Обучение как внутри так и вне компании, тренинги, корпоративные мероприятия;
  • Интересные и перспективные проекты, которые окажут прямое влияние на Ваш карьерный рост.

навыки

компания

похожие вакансии

статьи для DevOps-инженеров