Middle DevOps Hadoop (Москва)

Нашему Партнёру, аккрудитованно продуктовой IT компании, разработчику Big Data платформы для крупного российского банка, в связи с ростом команды требуется:

Middle DevOps Hadoop

Проект: Инновационная платформа на базе Hadoop с георезервированием для одного из крупнейших банков РФ. Платформа основана на Apache Ozone и совместима с Hadoop HDFS, решает проблему «маленьких файлов» в Hadoop, поддерживает доступ по протоколу S3 и обеспечивает сквозное шифрование данных, что делает её незаменимой для современных IT-инфраструктур.

Основная задача: участвовать в разработке высоконагруженных сервисов, интеграций и внутренних платформенных компонентов, работать с асинхронной архитектурой, очередями сообщений и обработкой больших объёмов данных.

Технологии проекта: Hadoop, Ambari/Cloudera Manager, Ansible, GIT, Jenkins / GitLab CI, Linux, IPA.

Чем предстоит заниматься

• деплой кластера Hadoop и сервисов платформы: Spark, HBase, Druid, Solr;
• развертывание дополнительных узлов и настройка георезервированного режима работы;
• разработка конфигурационных файлов (xml, properties) по образцам команды, настройка compute, storage и network;
• участие в миграции без простоя: подготовка планов переключения, откат, мониторинг после запуска - под руководством Senior DevOps;
• автоматизация рутины через AI-инструменты кодинга (vibe coding): генерация и ревью конфигов, скриптов, SQL-запросов;
• ведение документации по миграции, поддержка промышленной эксплуатации.

Что ожидаем

• уверенная работа со скриптами автоматизации развёртывания (Ansible/Ambari Blueprints): написание плейбуков, работа с переменными, сетевыми правилами;
• опыт эксплуатации или администрирования сервисов экосистемы Hadoop/Big Data;
• опыт администрирования Linux (предпочтение RHEL/CentOS) на уровне уверенного пользователя.
• регулярная практика вайбкодинга: Copilot, Cursor или аналоги - умение генерировать код ИИ-ассистентом, проверять и доводить до рабочего;
• знание Java на уровне чтения и отладки кода - все сервисы (HDFS, Yarn, HBase) написаны на нём;
• Scala как плюс (Spark);
• Python или Bash для скриптов автоматизации;

Будет плюсом

• Опыт работы с Big Data-инфраструктурой;
• Опыт работы с Kubernetes;
• Опыт highload-разработки;
• Навыки DevOps / CI/CD.

Что мы предлагаем:

• Работу в стабильной аккредитованной IT-компании с большой историей;
• Официальное трудоустройство с первого дня, полностью белые деньги;
• Гибридный формат в Москве в режиме 3/2 2/3, комфортный офис в районе метро "Тульская";
• ДМС со стоматологией, возможность получения льготной ипотеки,
• Обучение как внутри так и вне компании, тренинги, корпоративные мероприятия;
• Интересные и перспективные проекты, которые окажут прямое влияние на Ваш карьерный рост.