Инженер по сопровождению Big Data-платформы

Юзтех - группа аккредитованных ИТ-компаний полного цикла разработки с многолетней экспертизой в передовых технологиях: DWH, BigData, AI/ML, Blockchain, BI, предиктивная аналитика, цифровые двойники производства и рисков.

ГК Юзтех является технологическим партнером таких компаний, как Mail.ru, 2Gis, НЛМК, Еврохим, ГоИнвест, Альфа-Банк, Сбер, ВТБ, МКБ, Самолет, Х5 retail Group, Газпромнефть, Леруа Мерлен, Ситилинк, Ланит, IBS. Также, ГК разрабатывает собственные ИТ-продукты (Юзбас, Октопус, Тил Эйчар) и флагманские проекты, которыми пользуется 70% населения страны.

Сфера:

Система автоматизирует процессы расчёта и аллокации расходов по бизнес-блокам, продуктам, клиентским сегментам, каналам продаж и проектам, а также включает инструменты аналитической отчётности и дашборды.

Ищем инженера, который будет отвечать за техническое сопровождение платформы, анализировать сбои в процессах обработки данных и локализовывать причины возникающих проблем.

Задачи:

• Сопровождать и анализировать существующие процессы загрузки и обработки данных.
• Мониторить процессы загрузки, выявлять отклонения и аномалии.
• Локализовывать причины технических сбоев в компонентах платформы.
• Анализировать работу Spark, Hive и Impala, корректировать скрипты для диагностики проблемных кейсов.
• Читать Python-код и определять потенциальные причины ошибок.
• Работать с логами и собирать техническую информацию для анализа инцидентов.
• Разбирать обращения пользователей в рамках второй линии поддержки, в том числе вопросы, связанные с перегрузкой данных.
• Устанавливать доработки в продуктивный контур.
• Проверять техническую документацию.
• Взаимодействовать с техническим лидером, аналитиком и разработчиками команды.

Мы ожидаем:

• Уверенное знание SQL: DML, DDL.
• Практический опыт работы со Spark, Hive и Impala.
• Хорошее понимание Spark и особенностей обработки данных в Big Data-среде.
• Умение анализировать и корректировать скрипты для локализации проблем и сбора технической информации.
• Опыт работы с Airflow, Kafka, S3 / MinIO, ClickHouse, PostgreSQL.
• Python - умение читать код, понимать его логику и локализовывать ошибки.
• Базовое владение Bash: поиск логов, анализ информации в них, выполнение простых команд.
• Опыт работы с Git, CI/CD, Jira, Confluence или аналогичными инструментами.
• Понимание форматов XML, JSON.
• Навыки системного анализа, необходимые для поиска причин сбоев и анализа работы системы.
• Опыт работы с React от 6-12 месяцев: достаточно понимать устройство приложения и уметь локализовывать сбои во frontend-части.
• Будет плюсом опыт работы с Power BI и аналитическими системами.

Мы предлагаем:

• Карьерную и профессиональную возможность в стабильной, аккредитованной ИТ-компании;
• Расширенный полис ДМС со стоматологией, корпоративный психолог;
• Необходимую технику для комфортной работы;
• Обучение, сертификацию, клуб английского языка;
• Доступ к Корпоративной библиотеке и к Корпоративному университету;
• Внутрикорпоративные профильные коммьюнити;
• Заботу о детях сотрудников: корпоративные скидки, подарки, детские дни;
• Геймифицированную программу лояльности: поверь, ты будешь восторге от нашего корпоративного магазина;
• Корпоративную жизнь: мы много работаем и классно отдыхаем.